- 博客(1)
- 收藏
- 关注
RSS订阅转载 Python 从零开始爬虫(一)——爬虫伪装&反“反爬”
文：八九寺真宵 from：SegmentFault (侵删) 之前提到过，有些网站是防爬虫的。其实事实是，凡是有一定规模的网站，大公司的网站，或是盈利性质比较强的网站，都是有高级的防爬措施的。总的来说有两种反爬策略，要么验证身份，把虫子踩死在门口；要么在网站植入各种反爬机制，让爬虫知难而退。 本节内容就着这两种反爬策略提出一些对策。 身份伪装 就算是一些不知名的小网站，多多少少还会检查一下headers验证一下访者的身份，大网站就更不用说了（我一次爬网易云的时候，忘记加headers，直接被红掉）
2020-09-11 14:43:07
386
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人