- 博客(13)
- 资源 (4)
- 收藏
- 关注
转载 CentOs7安装docker和splash
我执行如下命令时报错: [root@localhost ~]# yum-config-manager > --add-repo > https://download.docker.com/linux/centos/docker-ce.repo -bash: https://download.docker.com/linux/centos/docker-c...
2018-09-30 14:52:05 283
原创 使用scrapy+splash+Lua脚本实现滚轮动态加载爬取CSDN
爬取CSDN的时候发现,csdn需要一直使用鼠标滑轮下拉,动态加载使用Lua脚本,详细解释见官方文档https://splash.readthedocs.io/en/stable/function main(splash, args) splash:go(args.url) local scroll_to = splash:jsfunc("window.scrollTo")...
2018-09-28 15:56:57 4693 8
原创 Pycharm常用的快捷键
Ctrl + / 行注释/取消行注释Ctrl + Shift + / 块注释Ctrl + Alt + L 代码格式化Ctrl + Y 删除选定的行Ctrl + D 复制选定的区域或行F3 下一个Shift + F3 前一个Ctrl + R 替换Ctrl + Shift + F 或者连续2次敲击shift 全局查找{可以在整个项目...
2018-09-28 15:31:30 822
转载 python的ConfigParser模块
简介ConfigParser模块在python3中修改为configparser.这个模块定义了一个ConfigParser类,该类的作用是使用配置文件生效,配置文件的格式和windows的INI文件的格式相同该模块的作用 就是使用模块中的RawConfigParser()、ConfigParser()、 SafeConfigParser()这三个方法(三者择其一),创建一个对象使用对象的...
2018-09-28 10:12:43 106
原创 关于CentOS7使用yum卸载,防火墙的使用命令
卸载一个软件时yum -y remove httpd卸载多个相类似的软件时yum -y remove httpd*卸载多个非类似软件时yum -y remove httpd php php-gd mysqlfirewalld的基本使用启动: systemctl start firewalld关闭: systemctl stop firewall...
2018-09-27 18:21:38 12132
原创 mongodb添加超级管理员
进入mongodb,会打印下面的警告解决sudo echo "never" > /sys/kernel/mm/transparent_hugepage/enabledsudo echo "never" > /sys/kernel/mm/transparent_hugepage/defrag# 添加超级管理员mongo --port 27017 ...
2018-09-27 18:21:19 6654 3
原创 安装splash及解决点击Docker出现windows 正在查找bash.exe。如果想亲自查找文件,请点击“浏览”的问题
chromedriver下载地址:http://chromedriver.storage.googleapis.com/index.htmltoolbox下载地址:https://get.daocloud.io/toolbox/安装splash,需要先安装Docker,第一步:下载toolbox,地址在上面点击下一步直到完成。点击桌面的快捷方式可能会有下面的问题解决点击Dock...
2018-09-26 11:05:29 1008
原创 关于使用Eric6和pyqt5,写一个三级联动的demo
新建项目选择下拉框以及label和按钮,还有一个tableview用来展示数据点击保存,然后选择compile form 编译成代码,再选择表单代码生成器,选择下面的函数点击forms code generator,选择生成函数,会有以下文件直接将生成的代码放在pycharm中运行UI_scrapy_qt中的不用改,程序逻辑在scarpy中下...
2018-09-20 10:45:23 827
原创 解决Could not start Qt-Designer
我的方法是解决没有designer.exe,这个东西没有,在文件中找不到,直接pip install 安装后没有所以重新安装 安装缺少的PyQt5 tools,可使用以下源:pip install PyQt5-tools -i http://pypi.douban.com/simple --trusted-host=pypi.douban.com 安装完成后,在./...
2018-09-18 17:36:56 3308
原创 UnicodeEncodeError: 'latin-1' codec can't encode characters in position 69-70: ordinal not in range(
UnicodeEncodeError: 'latin-1' codec can't encode characters in position 69-70: ordinal not in range(256)的解决办法MySQLdb.connect方法中加charset="utf8"
2018-09-10 14:07:30 1440
原创 Django安装MySQLDB
Django安装mysqldb直接使用pip安装失败,错误提示如下在该网址下载.whl文件https://www.lfd.uci.edu/~gohlke/pythonlibs/pip install mysqlclient-1.3.13-cp36-cp36m-win_amd64.whl...
2018-09-10 10:06:38 1196
原创 Mongodb的导入导出
关注公众号,获取更多Python干货2019.04.28更新数据库的导出导出类型为json,数据库:mapdb,集合:bike 字段:bikeId,lat,lng,current_time,source ,条件为source字段为ofo第一条数据mongoexport --port 27017 -u sangfor_edr -p Sangforedr! -d sangfor_ed...
2018-09-05 09:21:25 3316
原创 关于爬虫模拟美团登陆后,解决302重定向的问题的方法
帮忙测测我的博客,别太夸张,谢谢http://123.207.61.85:6789/在使用requests中的方法模拟登陆,没有用scrapy中本来的方法。self.session.get(self.get_url, data=post_data, headers=self.headers)登陆之后去请求下一个链接的时候,就会出现下面的错误scrapy DEBUG Redir...
2018-09-04 17:32:04 10366 7
postern-stuff-master.zip
2020-05-16
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人