ASP.NET抓取网页内容－文字

最新推荐文章于 2021-12-16 10:56:44 发布

zhaili1978

最新推荐文章于 2021-12-16 10:56:44 发布

阅读量746

点赞数

分类专栏： asp.net中的有些封装（方法）文章标签： asp.net encoding textbox server exception asp

本文链接：https://blog.csdn.net/zhaili1978/article/details/6256133

版权

asp.net中的有些封装（方法）专栏收录该内容

102 篇文章 1 订阅

订阅专栏

ASP.NET 抓取网页内容－文字

ASP.NET 抓取网页内容－图片

ASP.NET 抓取网页内容－Post 数据

ASP.NET 抓取网页内容－防止重定向

ASP.NET 抓取网页内容－保持登录状态

ASP.NET 抓取网页内容－把当前会话带到 WebRequest 中

ASP.NET 中抓取网页内容是非常方便的，而其中更是解决了 ASP 中困扰我们的编码问题。

需要三个类：WebRequest、WebResponse、StreamReader。

WebRequest、WebResponse 的名称空间是：

System.Net

StreamReader 的名称空间是：

System.IO

核心代码

WebRequest request = WebRequest.Create("http://www.cftea.com/");
WebResponse response = request.GetResponse();
StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.GetEncoding("gb2312"));

WebRequest 类的 Create 为静态方法，参数为要抓取的网页的网址；

Encoding 指定编码，Encoding 中有属性 ASCII、UTF32、UTF8 等全球通用的编码，但没有 gb2312 这个编码属性，所以我们使用 GetEncoding 获得 gb2312 编码。

示例

<%@ Page Language="C#" %>
<%@ Import Namespace="System.Net" %>
<%@ Import Namespace="System.IO" %>
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">

<html xmlns="http://www.w3.org/1999/xhtml" >
<head runat="server">
    <title>抓取网页内容 - 千一网络</title>
</head>
<body>
    <form id="form1" runat="server">
    <div>
    <asp:TextBox ID="tb" runat="server" Width="500" Height="300" TextMode="multiLine"></asp:TextBox>
    </div>
    </form>
</body>
</html>