- 博客(6)
- 资源 (13)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 Ubuntu16.04 安装chromedriver、chrome 及 运行selenium
更新apt-get sudo apt-get update 下载最新版本谷歌浏览器 wget https://dl.google.com/linux/direct/google-chrome-stable_current_amd64.deb 安装下载好的谷歌浏览器 sudo dpkg -i google-chrome-stable_current_amd64.deb...
2019-12-19 19:33:59
4823
7
原创 Scrapy框架——日志配置
setting配置 import datetime #配置日志文件名和位置 to_day = datetime.datetime.now() log_file_path = "log/scrapy_{}_{}_{}.log".format(to_day.year,to_day.month,to_day.day) LOG_FILE = log_file_path LOG_LEVEL = "WA...
2019-12-19 13:27:16
674
原创 Scrapy框架——shell
环境 ubuntu scrapy ipython 为什么要使用 scrapy shell？ Scrapy终端是一个交互终端，供您在未启动spider的情况下尝试及调试您的爬取代码。 其本意是用来测试提取数据的代码，不过您可以将其作为正常的Python终端，在上面测试任何的Python代码。 该终端是用来测试XPath或CSS表达式，查看他们的工作方式及从爬取的网页中提取的数据。 在编写您...
2019-12-17 14:55:03
257
原创 远程连接mongodb
环境 阿里云服务器Ubuntu16.04 本地Windows10 mongodb 2.6.10 解决方案 修改配置文件 sudo vim /etc/mongo.conf，将bind_ip的值设为0.0.0.0，将auth的值设为false。 端口转发 在云服务器安全组规则中进行添加修改。 重启mongodb sudo service mongod stop sudo servic...
2019-12-15 18:58:50
503
原创 ubuntu下安装并开启pyspider爬虫框架（去坑）
在ubuntu系统中安装pyspider最大的困难是要依赖组件经常出错，特别是pycurl，但把对应的依赖组件安装好，简单了。所以要想安装pyspider框架，必须先安装pycurl这个依赖包。在Ubuntu 16.04上安装pycurl时大致会遇到一下两个问题： 在使用pip install pycurl是报curl_config no found错误 gnutls.h: No such f...
2019-12-14 15:19:39
417
原创 Windows下创建python虚拟环境
默认已经完成安装python和pip； 我计划将虚拟环境安装在D盘； 安装创建虚拟环境的包,pip install virtualenv; 在当前目录下，输入指令，创建一个虚拟环境名为Test，在cd到Test的Scripts目录下，输入指令activate激活这个虚拟环境 输入以下指令，可以退出虚拟环境 ...
2019-12-13 17:21:23
673
opencv3.4 windows64
2020-10-11
kaggle冰山船舶卫星图数据集
2020-08-04
flower_photos.7z
2020-08-01
HCNA认证必备资源——腾讯微云
2020-04-11
云服务器ubuntu配置文件
2019-01-12
直方图修正方法的研究
2019-01-11
图像的基本运算及应用研究
2019-01-11
数字图像处理课设——图形界面设计
2019-01-11
夜间防睡控制器
2019-01-11
急问·python中的函数文档
2017-07-06
TA创建的收藏夹 TA关注的收藏夹
TA关注的人