c# 爬虫之（搜狗微信网站）

1、需求获取搜狗微信网站 通过关键词搜索得到的结果列表及详情

2、通过跟踪发现具体的url为：https://weixin.sogou.com/weixin?query=%E9%92%9B%E6%A3%92%E6%BB%A4%E8%8A%AF&_sug_type_=&s_from=input&_sug_=n&type=2&page=2&ie=utf8

其中query为关键词参数，page为页码参数，请求此链接可直接得到列表页数据

3、此时我们想获取详情页数据，便要拿到每条数据的连接，但发现列表页的连接为加密方式，如下

在页面上单独请求此链接可正常返回详情页面，可见中间做了一次跳转。接下来，我们请求此链接试试，发现它返回了一串js代码

观察发现，url这串字符便是详情页的地址，至此end。