python
文章平均质量分 70
qq_36376711
没有简介
展开
-
python3 爬虫 urllib +采用bs4(三)批量爬取慕课网免费课程及课程详细章节信息
爬取1-1000号课程信息直接上完整代码,看着可能很复杂,但仔细剖析就能明白from urllib import requestfrom bs4 import BeautifulSoupimport timeimport sysimport reimport osdef mkdir(path): # 去除首位空格 path=path.strip() # 去...原创 2019-10-15 17:38:06 · 540 阅读 · 0 评论 -
python3.7.1安装后改文件名导致pip等指令无法使用的bug
cmd中使用pip时出现错误:failed to create process/fatal error in launcher原因特别奇怪,简直是不应该有的问题。在于当初安装时勾上了添加python到路径,所以对python文件夹进行移动,改名等操作,会导致该问题,并且手动更改环境变量无法解决。估计是因为安装时勾了这个后某配置文件默认寻址设置成了安装位置,由于我不知道配置文件在哪儿,所以只...原创 2019-01-03 19:35:58 · 2133 阅读 · 1 评论 -
Python明明pip安装成功却提示找不到包
原因1:版本不对,如用环境变量设置的python3.7路径,那么用的就是3.7的pip.exe安装了包。却用的是2.7的python运行 发现有评论说不知道怎么解决,于是增添个解决办法:环境变量删除3.7路径,添加2.7路径,再使用pip安装2.7的包 Python2和3尽量不要混用,没办法要使用混用(IDLE)的情况下你只能每次使用前修改环境变量设置成需求的版本 当...原创 2019-01-11 11:15:48 · 30396 阅读 · 3 评论 -
python3 实现爬虫 urllib篇 + 数据处理(采用bs4) (二)
这次介绍urllib库和BeautifulSoup的一些细节用法如果有些函数不明白什么作用,请参考第一篇文章urllib为python3自带库,bs4需要cmd下 pip install bs4.如果没有成功基本是你环境变量设置或者pip的问题https://blog.csdn.net/qq_36376711/article/details/86614578request访问方法一:ur...原创 2019-01-28 12:31:31 · 443 阅读 · 0 评论 -
python3 实现爬虫 urllib篇 + 数据处理(采用bs4)
爬虫需要你至少知道html标签和css的超基本的知识,建议先学了再学爬虫很简单的,只要一天你就能明白html css分别是做什么的了。不想学就只好边看我说明边自己百度不懂的地方了urllib是python3下载完自带的包bs4需要下载pip install bs4from urllib import requestfrom bs4 import BeautifulSoup#要抓取的...原创 2019-01-23 17:28:17 · 1611 阅读 · 0 评论