通过java.net.URL类抓取某个网页的内容 选择自 cqq 的 Blog

 

/**
 文件名 : OpenUrl.java
 描述 :通过 java.net.URL 类访问一个页面,并且返回结果 

  **/
import java.net.*;
import java.io.*;

public class OpenUrl
{
 public String getContent(String strUrl)
 // 一个public方法,返回字符串,错误则返回"error open url"
 {
  try{
   
   URL url=new URL(strUrl);
   BufferedReader br=new BufferedReader(new InputStreamReader(url.openStream()));
   String s="";
   StringBuffer sb=new StringBuffer("");
   while((s=br.readLine())!=null)
   {     
    sb.append(s+"/r/n");    
   }
   br.close();
   return sb.toString();
  }
  catch(Exception e){
   return "error open url" + strUrl;
   
  }  
 }
 
 public static void main(String args[])
 {
  //具体使用方法
  OpenUrl ou=new OpenUrl();
  System.out.println(ou.getContent("http://127.0.0.1"));
 }
 
}

例子:<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
<HTML>
<HEAD>
<%@ page
language="java"
contentType="text/html; charset=GB2312"
pageEncoding="GB2312"
%>
<%@ include file="../ini/incdb.jsp"%> 
<%@ page import="java.net.*"%>

<META http-equiv="Content-Type" content="text/html; charset=UTF-8">
<META name="GENERATOR" content="IBM WebSphere Studio">
<META http-equiv="Content-Style-Type" content="text/css">
<LINK href="../theme/Master.css" rel="stylesheet" type="text/css">
<TITLE>judge_login_type.jsp</TITLE>
</HEAD>
<BODY>
<%
  

   
         String strUrl= null;
         strUrl = "http://202.107.231.3/authcenter/exist.php?acctype=xxxx&idcard=xxxx";
          //访问验证页面并且取得返回的结果。
         try
         {  
            
             URL url=new URL(strUrl);
             URLConnection conn_1=url.openConnection();
            //别忘了指定页面编码,避免MalformedInputException?
           BufferedReader br=new BufferedReader(new InputStreamReader(conn_1.getInputStream(),"utf-8"));
             String s="";
    String line_1;
      out.println("success0!!");
             while((line_1=br.readLine())!=null)
    {
        out.println(line_1);
    }
    br.close();
             //out.println(sb.toString());
         }
         catch(Exception e)
         {
             out.println("error open url" + strUrl); 
    e.printStackTrace();
         } 

  
  
%>
</BODY>
</HTML>

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值