C#网络爬虫(获取需要登录的网站数据)

鉴于业务需求,我们系统需要从某个网站爬取数据,而这个网站是需要登录的,所以请求需登录的网站数据的时候需要带上cookie,百度了一堆很多都是从请求的数据中取得cookie,我在想我都能取得数据了,还要cookie干嘛呢,不过一开始也是不清楚饶了弯路,鉴于此分享一下本人的经验

无图无真相,先贴代码
在这里插入图片描述
以上是抓数据的主要代码,现在的关键是如何取得cookie?
见证奇迹的时刻来了:
以谷歌浏览器为例,从谷歌的cookie文件中获取cookie信息,谷歌的cookie文件在C:\Users\acer\AppData\Local\Google\Chrome\User Data\Default\Cookies,acer要改为自己的电脑登录账号名
在这里插入图片描述
以上代码是从文件获取cookie信息,cookie的值是经过加密的需要解密
在这里插入图片描述
以上代码是解密过程

  • 0
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 7
    评论
评论 7
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值