c#爬虫与Regex类(字符串匹配)

本文介绍了如何使用C#的WebClient类进行网页爬取,并结合Regex类进行正则表达式匹配,从网页源代码中提取特定信息。通过示例展示了如何爬取网页并利用Matches()方法获取href属性值,从而提取网页链接。
摘要由CSDN通过智能技术生成

c#封装了现有的实行爬虫的WebClient类:
一般代码写法:
WebClient webClient = new WebClient();//定义一个WebClient对象
webClient.Encoding = Encoding.UTF-8;
string url = “xx”;//爬取的网页地址
wecClient.DownloadString(url);//调用DownloadString()方法爬取,爬取结果为字符串
也可以采用WebClient对象的其他不同方法获取不同的爬取结果:
在这里插入图片描述

2.Regex类

Regex类的静态方法IsMatch()的第一个参数为被匹配的字符串,第二个参数为正则表达式,若被匹配的字符串满足正则表达式(前一个字符串包含后一个字符串,或满足以指定元素开头与结尾的正则表达式规则)该方法的返回值为true,否则为false。
在这里插入图片描述
爬虫实例:
例如:爬取下列字符串的网页:
在这里插入图片描述
网站源代码:
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
注意这里输出了爬取结果。
在这里插入图片描述
在这里插入图片描述

爬取的字符串html的值为网页源代码。
在这里插入图片描述
Regex对象的Matches()方法返回html中所有符合正则表达式规则的字串,即标签中属性href值。
Trim()方法删除字符串头部及尾部出现的空格。
实验结果生成的文件:
在这里插入图片描述
在这里插入图片描述

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值