我们经常在朋友圈看到 Python 培训广告,宣传语必然有几大关键点,Python 语言简单到飞起,职场必备技能,学完升职加薪。
诚然,Python 作为一个脚本语言,学习相对简单,但是学习语言的目的是什么,是为了解决问题,不然学了这么久语法,几个月后还是从 print( hello world) 重新开始。
既然明确是为了解决问题,比如我想获取某个网页的数据并整理成 excel。通过网上搜索,或者问周围的程序员朋友,大部分的回答是用 Python 写个爬虫。
其实不然,有很多优秀的工具完全能满足爬取网页需求,而且不用写一行代码,这次介绍的就是小白爬虫利器 - Web Scraper (谷歌浏览器插件)。
举个例子,我们这次的任务是爬取豆瓣穷游天下小组的帖子。
准备工作
首先确保你安装了新版谷歌浏览器和 WebScraper 插件,插件安装教程见:谷歌(Chrome)浏览器插件安装教程