HttpURLConnection抓取网页响应信息

8 篇文章 0 订阅

/**
* 获取网页信息
* @param remoteFile 网址url
* @return
* @throws IOException
*/

public String getRemoteHtml(String remoteFile) throws IOException{
URL url = null;
HttpURLConnection urlc = null;
String sCurrentLine="";
java.io.BufferedReader l_reader=null;
StringBuffer sTotalString = new StringBuffer("");
try {
remoteFile=remoteFile.replaceAll("\\s", "%20");//转换空格
System.out.println("search ulr:"+remoteFile);
url = new URL(remoteFile);
urlc = (HttpURLConnection) url.openConnection();
urlc.setRequestProperty("Accept-Language", "zh-cn");
// urlc.setRequestProperty("User-Agent","Mozilla/6.0 (compatible; MSIE 5.0; Windows NT; DigExt)");//在linux下需注释该行
// 输入流
l_reader = new java.io.BufferedReader(new java.io.InputStreamReader(urlc.getInputStream(),"UTF-8"));

//得到返回的信息
while ((sCurrentLine = l_reader.readLine()) != null) {
sTotalString.append(sCurrentLine);
sTotalString.append("\n");
}
}finally{
if(l_reader!=null)
l_reader.close();
if(urlc!=null)
urlc.disconnect();
}
return sTotalString.toString();
}
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值