昨晚加班到很晚,老板给了一个需求,叫我去爬公司品牌在网络上面历史几年的数据,我想着用python写几段爬虫代码不就可以解决了,万事俱备,整备去爬之后才发现,爬到的数据寥寥可数,很多网站都请求失败。
求助万能的朋友圈,才知道现在网络上面有现成的工具可以轻松实现。
时效性:只花了几分钟,用甲鱼舆情监测软件就把老板需要的历史几年的数据给爬出来了。这不是在这个软件有多么强大阿,事实就是这样。
反思:python语音去用做爬虫爬数据还有意义价值吗?现成的工具都这么好用了?还有必要去研究python这个爬虫吗?