java/android抓取网页（含js）内容…

原文链接：http://blog.csdn.net/zgyulongfei/article/details/7909006

有时候由于种种原因，我们需要采集某个网站的数据，但由于不同网站对数据的显示方式略有不同！

本文就用Java给大家演示如何抓取网站的数据：（1）抓取原网页数据；（2）抓取网页Javascript返回的数据。

一、抓取原网页。

这个例子我们准备从http://ip.chinaz.com上抓取ip查询的结果：

第一步：打开这个网页，然后输入IP：111.142.55.73，点击查询按钮，就可以看到网页显示的结果：

第二步：查看网页源码，我们看到源码中有这么一段：

从这里可以看出，查询的结果，是重新请求一个网页之后显示的。

再看看查询之后的网页地址：

也就是说，我们只要访问形如这样的网址，就可以得到ip查询的结果，接下来看代码：

[java] view plain copy print ?

1. public void captureHtml(String ip) throws Exception {  
2.     String strURL = "http://ip.chinaz.com/?IP=" + ip;  
3.     URL url = new URL(strURL);  
4.     HttpURLConnection httpConn = (HttpURLConnection) url.openConnection();  
5.     InputStreamReader input