HttpURLConnection读取html文件

问题是---------bufferreader不管如何转化字符集读取,内容显示均为乱码;后来,使用htmlparse解析html的开源代码,发现在读取网页时没有问题 ==== trace code 发现 乱码有可能是压缩网页造成
比如是-----gzip格式的网页;所以采用以下代码读取网页是没有问题

public static void GetFromHtml() throws IOException{
//int ret=0;
String contentEncoding;
HttpURLConnection url=null;
//String htmladdr="http://www.zhcw.com/data-js/nowdata50.js";
String htmladdr="http://www.itpub.net/753054.html";
       StringBuffer buffer=new StringBuffer("");
       try {
        URL url1 = new URL(htmladdr);
        
        
        url =   (HttpURLConnection)url1.openConnection ();
        url.setRequestProperty("User-Agent", "mozlla/5.0");
        url.setRequestProperty("Accept-Encoding", "gzip, deflate");
        url.connect();
        
        
        contentEncoding=url.getContentEncoding();
        
} catch (Exception e) {
// TODO Auto-generated catch block

e.printStackTrace();
return ;
} 
if(url!=null){
InputStream stream;
if ((null != contentEncoding)
                   && (-1 != contentEncoding.indexOf ("gzip"))
            {
                   stream = new GZIPInputStream (
                     url.getInputStream ());
            }
            else if ((null != contentEncoding)
                   && (-1 != contentEncoding.indexOf ("deflate"))
            {
                   stream = new InflaterInputStream (
                      url.getInputStream ());
            }
            else
            {
                   stream = url.getInputStream ();
            }

//InputStream stream= url.getInputStream();

      BufferedReader reader =
         new BufferedReader(new InputStreamReader(stream));
      
      String temp;
          while (null != (temp = reader.readLine())) {
           //temp=new String(reader.readLine().getBytes("gbk"); 
           System.out.println(temp); 
            // break; 
          }
          reader.close();
          }
}

 

转载:http://hi.baidu.com/anypcao/blog/item/965d4443161751159213c634.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

lzj0470

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值