前言
在互联网企业做市场分析,常常需要或许大量的数据。
开发实际的项目,需要足够多的数据,需要自己去想办法获取。
想要从头开始自学爬虫技术可能吗?应该是什么样的步骤?有哪些资源现在可以用?
万事开头难,一个好的爬虫项目就是一个好的开始!
很多小伙伴,特别是在学校的学生,接触到爬虫之后就感觉这个好厉害的样子,我要学。但是却完全不知道从何开始,很迷茫,学的也很杂。
如果你对爬虫很感兴趣,想找一些项目练练手,那么这些项目再合适不过了!
awesome-spider
爬虫大合集!项目多多
开源地址:
https://github.com/facert/awesome-spider
收集各种爬虫(ps:默认语言为python),这是一个来自知乎工程师开源的,github标星高达12.9k,收集各类爬虫从a-z。
种类齐全,唯一的缺点就是部分已经不能用了,爬虫是有时效性的,技术更新太快了。