weixin_61534355的博客

原创 爬虫到底合不合法？

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、爬虫爬虫产生的背景爬虫是什么？二、Robots协议定义位置查看方式总结前言作为一个爬虫萌新，老师在第一节课就告诉大家要注意爬虫的界限和法律规范，让大家不要因为爬虫而锒铛入狱。原来程序员不仅面临秃发威胁，一不小心还会步入万丈深渊。近年来，我们总是能在各种各样的新闻里看到程序员因为爬虫程序而被抓的新闻。程序员聚集的论坛里也总是能看从入门到入狱的教程，程序员们也经常自己调侃自己再干下去就要入狱了。虽然里面的人个个都是人才