python
现在给爷爬,爬虫
这个作者很懒,什么都没留下…
展开
-
python多线程爬虫爬取斗图啦网站表情包图片
如题:这次来个真正的多线程版本。估计也没人看,如果有感兴趣的或者不懂的可以留言。有目前正在学爬虫的也可以交流。import threadingimport requestsfrom lxml import etreeimport urllibimport refrom queue import Queuepath = 'D:/壁纸/python/斗图啦-多线程版本/' # 设置图片的存储路径class Producer(threading.Thread): headers原创 2020-06-06 11:39:16 · 338 阅读 · 0 评论 -
爬虫中chromedriver的配置问题
chromedriver的配置问题chromedriver下载:下载地址(最好找到与自己chrome浏览器相匹配的版本)我使用的浏览器版本是83.0.4103.61最新版(2020/5/20),在chromedriver的下载链接中没有找到完全匹配的,于是选择了83.0.4103.39的版本,也可以正常使用将下载好的压缩包解压,并将chromedriver.exe添加到chrome浏览器的安装路径之下。本人为例:chrome.exe放在“C:\Program Files (x86)\Goog原创 2020-06-03 13:45:20 · 637 阅读 · 0 评论 -
python爬虫下载斗图啦表情包图片
表情包网站下载表情包代码如下:import threadingimport requestsfrom lxml import etreeimport urllibimport relock = threading.Lock()Base_url = "https://www.doutula.com/photo/list/?page={}"Detail_urls = []headers = {'User-Agent': "Mozilla/5.0 (Windows NT 10.0; WOW6原创 2020-06-02 19:34:44 · 294 阅读 · 0 评论 -
python实现在一个画布绘制多张双y轴折线图,y轴数据大小不一样,怎么hua?
问题的提出寻找资料时,发现要么是将多张图绘制在同一画布之上,要么是一张图绘制多条曲线,还有就是绘制双Y轴曲线图,而本人想将四张双Y轴折线图呈现在同一个画布之上,也就是使得四个两两坐标尺度不同的图片绘制在一张图之上,这就需要结合上述方法。直接上图实现代码一句话: 将画布分为左上左下、右上右下的四跨区域,然后在每块区域中画出两个不同Y轴的折线图import pandas as pdimp...原创 2019-12-08 21:12:43 · 3846 阅读 · 0 评论 -
conda虚拟环境中的第三方包的安装,用conda还是pip? python虚拟环境安装第三方库之后仍提示没有该库?
evns虚拟环境中第三方包的安装1.事情经过2.解决办法1.事情经过学习了在anaconda中创建虚拟环境之后(可以创建任意现有 版本的python),自己着手创建了一个python3.5的虚拟环境(可以通过三种方式)。但是,在安装keras等第三方包的时候出现了问题。1 一开始,我是在如下路径中利用pip安装第三方库,但失败了。原因,没有在指向虚拟环境的路径中安装。下图中base表示原...原创 2019-11-20 16:49:07 · 4239 阅读 · 2 评论 -
conda创建的环境中出现Fatal error in launcher: Unable to create process using 某某python.exe或pip.exe
适用于在conda创建的环境中无法使用pip进行安装第三方包的解决方法conda环境中无法安装第三方包解决方式:conda环境中无法安装第三方包本人在创建新的conda环境之后,删除了原来多余的一个python3.5的环境,可以系统依然链接到原来的那个版本,导致新的环境中pip insall xxxx无法安装(python3) C:\Users\Administrator>pip in...原创 2019-11-20 15:50:29 · 4263 阅读 · 2 评论 -
pip安装模块慢? 用清华国内镜像下载,超级快
用pip安装模块的时候经常中断或者太慢下面是用清华镜像下载pip install -i https://pypi.tuna.tsinghua.edu.cn/simple 模块名比如更新tensorflowpip install -i https://pypi.tuna.tsinghua.edu.cn/simple tensorflow --upgrade...原创 2019-10-26 22:13:05 · 320 阅读 · 0 评论 -
_init__() got an unexpected keyword argument 'width'
**使用pyecharts绘制地图出现_init__() got an unexpected keyword argument ‘width’**pyecharts 分为 v0.5.X 和 v1 两个大版本,v0.5.X 和 v1 间不兼容,v1 是一个全新的版本。所以原因可能是Map内的参数设置出现变更楼主将pyecharts版本回退到0.1.9之后问题解决,不过我还是觉得应该去看看新版...原创 2019-10-14 14:51:08 · 7499 阅读 · 1 评论 -
Failed calling sys.__interactivehook__,不需要删除模块,已完全解决
以下是楼主出现问题时窗口显示的代码:(base) C:\Users\Administrator>pythonPython 3.7.3 (default, Mar 27 2019, 17:13:21) [MSC v.1915 64 bit (AMD64)] :: Anaconda, Inc. on win32Type “help”, “copyright”, “credits” or “...原创 2019-09-26 10:32:11 · 1742 阅读 · 11 评论 -
python的3种执行方式
python的3种执行方式解释器(包括官方解释器cpython 和使用其他语言开发的解释器)输入 :python 文件名.py交互式运行python特点:直接在终端窗口中运行,不需要上述的输入文件名可以直接得到代码执行结果,不能保存代码,所以只适合少量的代码执行**进入退出方式:**在窗口输入python可进入官方shell,输入exit()或者快捷键CTRL+d可以推出I...原创 2019-09-26 09:46:08 · 1325 阅读 · 1 评论