如果你是爬虫小白,不停地遇到问题(求助无门的情况!!),那么来看看我的解决方法,或许有共同点!

适合在校学生和初学小白!!不含技术性,只有一个思想。

一:首先,学习网站(自学网站):慕课网和菜鸟教程
网址:http://www.imooc.com
菜鸟网址:https://www.runoob.com/w3cnote
爬虫0基础推荐课程:JavaScript深入浅出,初识python,和CSS,HTML前端。

二:之后,配置开发环境:
(1)pycharm(一般的项目社区版就够用)
安装教程:https://www.runoob.com/w3cnote/pycharm-windows-install.html
(2)python版本(一般是发行最新版本的往下3,4个版本最稳定)。
下载网址 https://www.python.org/getit/
(3)MySQL数据库和navacat可视化工具。
navaca下载: http://www.navicat.com.cn/download/navicat-for-mysql

     这几项都有免费版和破解版,要破解的话就多花时间吧。

三:明确目标,明确最终自己想要的效果。是要达到可视化还是只爬取数据内容。

四:接下来才是重点,咳咳,第一次写博客所以有些激动,就多扯了一些。

经验教训是:放弃胶着,不论在那个阶段。
爬取数据库信息出现了Process finished with exit code 0的情况,
各种排查,以一条一条Debug解决,花了3天。
之后解决数据传值到数据库的问题也花了4天(自学,汗)。
我将爬下来的数据拿到表格中去整理,然后再导入到数据库中。过程虽然曲折,但目的是达到了。可能自学多是这样吧,你不知道那一刻是你的临界点,那一刻有灵光闪现。
在这???是的,刚开始我也没有想到
经过去重处理

最后只有一句话送给自己和大家:只要思想不滑坡,办法总比困难多。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值