自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

replat-xin

奋力追赶

  • 博客(13)
  • 资源 (4)
  • 收藏
  • 关注

转载 CentOs7安装docker和splash

 我执行如下命令时报错:  [root@localhost ~]# yum-config-manager > --add-repo > https://download.docker.com/linux/centos/docker-ce.repo -bash: https://download.docker.com/linux/centos/docker-c...

2018-09-30 14:52:05 283

原创 使用scrapy+splash+Lua脚本实现滚轮动态加载爬取CSDN

爬取CSDN的时候发现,csdn需要一直使用鼠标滑轮下拉,动态加载使用Lua脚本,详细解释见官方文档https://splash.readthedocs.io/en/stable/function main(splash, args) splash:go(args.url) local scroll_to = splash:jsfunc("window.scrollTo")...

2018-09-28 15:56:57 4693 8

原创 Pycharm常用的快捷键

Ctrl + /    行注释/取消行注释Ctrl + Shift + /    块注释Ctrl + Alt + L     代码格式化Ctrl + Y    删除选定的行Ctrl + D  复制选定的区域或行F3   下一个Shift + F3   前一个Ctrl + R   替换Ctrl + Shift + F  或者连续2次敲击shift   全局查找{可以在整个项目...

2018-09-28 15:31:30 822

转载 python的ConfigParser模块

简介ConfigParser模块在python3中修改为configparser.这个模块定义了一个ConfigParser类,该类的作用是使用配置文件生效,配置文件的格式和windows的INI文件的格式相同该模块的作用 就是使用模块中的RawConfigParser()、ConfigParser()、 SafeConfigParser()这三个方法(三者择其一),创建一个对象使用对象的...

2018-09-28 10:12:43 106

原创 关于CentOS7使用yum卸载,防火墙的使用命令

卸载一个软件时yum -y remove httpd卸载多个相类似的软件时yum -y remove httpd*卸载多个非类似软件时yum -y remove httpd php php-gd mysqlfirewalld的基本使用启动: systemctl start firewalld关闭: systemctl stop firewall...

2018-09-27 18:21:38 12132

原创 mongodb添加超级管理员

进入mongodb,会打印下面的警告解决sudo echo "never" > /sys/kernel/mm/transparent_hugepage/enabledsudo echo "never" > /sys/kernel/mm/transparent_hugepage/defrag# 添加超级管理员mongo --port 27017 ...

2018-09-27 18:21:19 6654 3

原创 安装splash及解决点击Docker出现windows 正在查找bash.exe。如果想亲自查找文件,请点击“浏览”的问题

chromedriver下载地址:http://chromedriver.storage.googleapis.com/index.htmltoolbox下载地址:https://get.daocloud.io/toolbox/安装splash,需要先安装Docker,第一步:下载toolbox,地址在上面点击下一步直到完成。点击桌面的快捷方式可能会有下面的问题解决点击Dock...

2018-09-26 11:05:29 1008

原创 关于使用Eric6和pyqt5,写一个三级联动的demo

新建项目选择下拉框以及label和按钮,还有一个tableview用来展示数据点击保存,然后选择compile form 编译成代码,再选择表单代码生成器,选择下面的函数点击forms code generator,选择生成函数,会有以下文件直接将生成的代码放在pycharm中运行UI_scrapy_qt中的不用改,程序逻辑在scarpy中下...

2018-09-20 10:45:23 827

原创 解决Could not start Qt-Designer

我的方法是解决没有designer.exe,这个东西没有,在文件中找不到,直接pip install 安装后没有所以重新安装 安装缺少的PyQt5 tools,可使用以下源:pip install PyQt5-tools -i http://pypi.douban.com/simple --trusted-host=pypi.douban.com         安装完成后,在./...

2018-09-18 17:36:56 3308

原创 UnicodeEncodeError: 'latin-1' codec can't encode characters in position 69-70: ordinal not in range(

UnicodeEncodeError: 'latin-1' codec can't encode characters in position 69-70: ordinal not in range(256)的解决办法MySQLdb.connect方法中加charset="utf8" 

2018-09-10 14:07:30 1440

原创 Django安装MySQLDB

Django安装mysqldb直接使用pip安装失败,错误提示如下在该网址下载.whl文件https://www.lfd.uci.edu/~gohlke/pythonlibs/pip install mysqlclient-1.3.13-cp36-cp36m-win_amd64.whl...

2018-09-10 10:06:38 1196

原创 Mongodb的导入导出

关注公众号,获取更多Python干货2019.04.28更新数据库的导出导出类型为json,数据库:mapdb,集合:bike 字段:bikeId,lat,lng,current_time,source ,条件为source字段为ofo第一条数据mongoexport --port 27017 -u sangfor_edr -p Sangforedr! -d sangfor_ed...

2018-09-05 09:21:25 3316

原创 关于爬虫模拟美团登陆后,解决302重定向的问题的方法

帮忙测测我的博客,别太夸张,谢谢http://123.207.61.85:6789/在使用requests中的方法模拟登陆,没有用scrapy中本来的方法。self.session.get(self.get_url, data=post_data, headers=self.headers)登陆之后去请求下一个链接的时候,就会出现下面的错误scrapy DEBUG Redir...

2018-09-04 17:32:04 10366 7

postern-stuff-master.zip

app 抓包时有可能抓不到包,可以使用 postern方便抓包,爬虫工程师必备.适合刚开始结束App逆向的同学,使用也比较简单。里面有相应的文档

2020-05-16

美团的市一级的信息

美团市一级的数据,对数据做过处理,剔除了区县的数据,只保留市一级,有拼音和拼音简写

2018-09-18

美团的省一级的信息

从美团网站拉下来的数据,省一级的数据,只能一个一个传,名字和code

2018-09-18

tcp-ip协议关系图

tcp-ip的协议关系图,特别详尽,非常适合新手学习的,

2018-06-14

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除