java.net.URL抓取网页数据

/**
文件名 : OpenUrl.java
描述 :通过 java.net.URL 类访问一个页面，并且返回结果
参考：http://java.sun.com
**/
import java.net.*;
import java.io.*;

public class OpenUrl
{

/**通过域名或IP地址取得网站数据
* @param strUrl example:http://www.baidu.com
* @return
*/
public String getContent(String strUrl)
// 一个public方法，返回字符串，错误则返回"error open url"
{
try{

URL url=new URL(strUrl);
BufferedReader br=new BufferedReader(new InputStreamReader(url.openStream()));
String s="";
StringBuffer sb=new StringBuffer("");
while((s=br.readLine())!=null)
{
sb.append(s+"\r\n");
}
br.close();
return sb.toString();
}
catch(Exception e){
return "error open url: " + strUrl;

}
}

public static void main(String args[])
{
//具体使用方法
OpenUrl ou=new OpenUrl();
System.out.println(ou.getContent("http://gongyi.baidu.com"));
}
}