友情提示：爬虫犯法

【回复“1024”，送你一个特别推送】

遥想当年，我的第一份实习工作，还就是做的爬虫呢。不知不觉 7 年过去了，如今首例利用爬虫技术非法盗抓数据案都已经被判违法了。

我记得我第一份实习工作，就是做的爬虫，利用爬虫技术，去爬取各种论坛和网站，然后要做到记录到每个论坛帖子的发帖时间，在论坛的板块，页数，发帖时间，发帖 ID ，然后存储起来，可以做到搜索关键字快速定位到哪个论坛的那一页，哪个帖子。而且这个爬虫技术基本上要做到可以适配几乎所有，可以说很多网站和论坛。

随便放一个论坛的首页网址进去，就可以快速爬虫论坛里的所有内容了。当时，感觉还是挺好玩的，当然越小的网站和论坛越容易爬虫，越大的论坛和越大科技公司做的网站等就越难爬，因为他们都做了反爬虫的处理，好像百度贴吧当时就很难爬虫。

如今呢？现在爬虫都犯法了，今天早上醒来，看到大家都在微博转发，尤其是技术圈里的人，都在说这件事。