使用htmlunit访问由Javascript生成的html -Java

我试图能够测试一个使用javascript来渲染大部分HTML的网站。使用HTMLUNIT浏览器，您将如何访问javascript生成的html？我正在浏览他们的文档，但不知道最好的方法可能是什么。使用htmlunit访问由Javascript生成的html -Java

WebClient webClient = new WebClient(); 
HtmlPage currentPage = webClient.getPage("some url"); 
String Source = currentPage.asXml(); 
System.out.println(Source);

这是一个简单的方法来找回页面的HTML，但你可以使用れ或另一种方式来访问由JavaScript生成的HTML？

来源

2010-06-02 rush66

假设问题是由于AJAX调用JavaScript生成的HTML，您是否试过'AJAX does not work' section in the HtmlUnit FAQ？

还有一个部分在howtos about how to use HtmlUnit with JavaScript。

如果您的问题没有在这里得到解答，我想我们需要一些更具体的细节才能提供帮助。

来源

2010-06-02 22:35:25 Brabster

你得花一些时间来执行JavaScript。

查看下面的示例工作代码。 bucketdiv s不在原始来源中。

import java.io.IOException; 
import java.net.MalformedURLException; 
import java.util.List; 
import com.gargoylesoftware.htmlunit.*; 
import com.gargoylesoftware.htmlunit.html.HtmlPage; 

public class GetPageSourceAfterJS { 
    public static void main(String[] args) throws FailingHttpStatusCodeException, MalformedURLException, IOException { 
     java.util.logging.Logger.getLogger("com.gargoylesoftware").setLevel(java.util.logging.Level.OFF); /* comment out to turn off annoying htmlunit warnings */ 
     WebClient webClient = new WebClient(); 
     String url = "http://www.futurebazaar.com/categories/Home--Living-Luggage--Travel-Airbags--Duffel-bags/cid-CU00089575.aspx"; 
     System.out.println("Loading page now: "+url); 
     HtmlPage page = webClient.getPage(url); 
     webClient.waitForBackgroundJavaScript(30 * 1000); /* will wait JavaScript to execute up to 30s */ 

     String pageAsXml = page.asXml(); 
     System.out.println("Contains bucket? --> "+pageAsXml.contains("bucket")); 

     //get divs which have a 'class' attribute of 'bucket' 
     List<?> buckets = page.getByXPath("//div[@class='bucket']"); 
     System.out.println("Found "+buckets.size()+" 'bucket' divs."); 

     //System.out.println("#FULL source after JavaScript execution:\n "+pageAsXml); 
    } 
}

输出：使用

Loading page now: http://www.futurebazaar.com/categories/Mobiles-Mobile-Phones/cid-CU00089697.asp‌x?Rfs=brandZZFly001PYXQcurtrayZZBrand 
Contains bucket? --> true 
Found 3 'bucket' divs.

版本的HtmlUnit：

<dependency> 
    <groupId>net.sourceforge.htmlunit</groupId> 
    <artifactId>htmlunit</artifactId> 
    <version>2.12</version> 
</dependency>

来源

2013-04-27 19:45:59 acdcjunior

使用htmlunit访问由Javascript生成的html -Java

回答

相关问题