艰辛的爬虫入门之路

听说爬虫这个新奇的概念,有限好奇心
就用自己的电脑试了试。

**
联想:ideapad 300s
系统:Win10
python: 3.7.0
无线网不太好,于是用手机4G开的热点。
感谢:
博客园博主:Bestone
唐松陈智铨两位的书《Python网络爬虫从入门到实践》
感谢博客上的大神
**
装好了python,并设置好环境变量(在系统变量中设置就好可以了),
windows 键+R ,输入 cmd
进入dos 界面:
输入命令:python
发现缺少 requests 模块,
pip install requests
紧接着:
缺少chardet 模块
图2,没有chardet 模块
下载chardet模块
下载chardet模块描述
紧接着:缺少urllib3模块
缺少urllib3模块

下载urllib3模块,
pip 没有下载成功,估计是手机4G没能力翻墙的原因
于是
下载urllib3模块
在这里插入图片描述

 git clone git://github.com/urllib3/urllib3.git
 python setup.py install

github 安装urllib3

通过这位大神的博客https://www.cnblogs.com/givemelove/p/9728757.html
得到灵感,我发现自己只是讲模块下载下来了,但是并没有build 和install .

Python安装第三方包(setup.py)
在github上下载了records文件到本地。
解压文件
cmd切换到文件setup.py的目录下
先执行

python setup.py build

再执行

python setup.py install` 

过程中也遇到了遇到:
ModuleNotFoundError: No module named ‘urllib3.exceptions’
参考上述博客解决

于是乎,借用大神的经验,完成了
解压缩
urllib3 安装成功
安装成功
又提示没有certfi 模块,豪横!
在这里插入图片描述
安装certifi 模块
安装certifi 模块
提示没有idna 模块;
在这里插入图片描述
安装idna模块
安装idna模块
然后就不用安装模块了
经验:缺啥模块,就安装啥模块,手机4G 网开热点,还不错

测试如下:
在这里插入图片描述

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值