C#AngelSharp爬取豆瓣组及微博组所有帖子
C# AngelSharp爬取豆瓣组及微博组所有帖子以前没写过爬虫,百度了豆瓣、微博爬取,得到的答案基本都是几年前事了,没多少可用的信息,就自己研究了下,做下整理,以下仅放出关键解析代码,有需要软件源码的回复下,足够多就放出链接。注意:在爬取时设置一个延时时间,使用Task.Delay()设置个几秒,不设置爬取不了几个帖子就会被封杀IP,需要更换代理才能继续//通过组url获取所有帖子var config = Configuration.Default.WithDefaultLoader();//
原创
2020-12-28 22:33:31 ·
704 阅读 ·
0 评论