2024年Python最新关于反爬虫我见到的各种前后端奇葩姿势_爬虫前端后端(1)

3：过去美团也采用过font的思路，用backgfround拼接，数字其实是图片，用不同的偏移量显示不同的字符。还个比较狠的，呈现的数值是SVG矢量图。

4：部分微信公众号会穿插各种蜜汁字符，再用样式调整隐藏他们，比如他：叨逼姐说

5：用display:none来随机化网页源码，有网站还会随机类和id的名字再加点随机的trtd，更加不好捕捉.比如：全网代理ip

二：各种异步加载反复嵌套

网易云音乐也怕爬什么都是异步加载嵌套在iframe里的，包括他的整个主页，而且src=”about:blank”

三：别以为后端汉子就不花哨

1：还有的网站识别出爬虫后会反骂一句话：

比如IT桔子，会返回Fack you Spider, 还有个麦子金服会返回一个go away，然后一般我就会解开加密后在hreder里加个呵呵，再发给他。

4：还有ip方面的操作

比如新浪知乎的反爬虫机制会对ip异常或者不带cookie的跳转到访客系统中，如果用模拟登陆就会反复出现验证码，这就涉及到是否是白ip，他的判定机制也和其他网站不同，其他主要是看近期常用登陆地ip为白，他是用注册时ip为白，因此只要用服务器去注册一个号，就基本轻松过了（17年实测）。

还有些佛系反爬虫，每个ip的第一次访问秒回数据，但是第二次就必然sleep 12 秒才返回，这招其实很佛系，你爬可以，别让我老板发现数据量太夸张了。一般这种就程序放着慢慢来吧，因为换个可靠ip也得好几秒。对方这么坦诚咱们也不乱来。

5：网页数据转化为图片的

比如站大爷的免费代理端口数据是扭曲图片构成的数字

还有各种网站用了不同的奇葩手法，用文中没有的类别的，欢迎各位看官放在评论区，回头我搞搞看补充上来。

作者：十四君

更多Python视频、源码、资料加群683380553免费获取

转自：https://zhuanlan.zhihu.com/p/45335052

最后

🍅 硬核资料：关注即可领取PPT模板、简历模板、行业经典书籍PDF。
🍅 技术互助：技术群大佬指点迷津，你的问题可能不是问题，求资源在群里喊一声。
🍅 面试题库：由技术群里的小伙伴们共同投稿，热乎的大厂面试真题，持续更新中。
🍅 知识体系：含编程语言、算法、大数据生态圈组件（Mysql、Hive、Spark、Flink）、数据仓库、Python、前端等等。

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友，可以戳这里无偿获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**