- 博客(34)
- 收藏
- 关注
转载 Channels学习笔记
环境 操作系统:CentOS 6.9 64bit Python:3.6.4 Django:2.0.4 安装 pip install channels 直接这样安装的话会报错,提示: Could not find a version that satisfies th...
2018-04-09 15:48:00
231
转载 解决PyCharm编辑HTML文件时使用JQuery异常
使用PyCharm编辑HTML文件时,如果使用了JQuery,比如: $('#title').text('test'); IDE会在“$”符合下出现波浪线,并提示“Unresolved function or method $()”,看起来很不爽,下面传授大家解决方案: File -&g...
2018-03-28 11:10:00
1532
转载 搭建你的专属短网址生成系统
前言 玩微博的盆友可能会经常看到一些短网址(类似:http://t.cn/xxx),点一下就跳到另外一个链接,有点重定向的意思,那么要怎么做才能用上这个功能呢?答案就是用YOURLS实现,这是一个用PHP写的开源程序,我们只需把环境搭好,简单配置一下即可。如果你是按照官网或者网上的某些博客...
2018-03-24 16:57:00
1067
转载 通过脚本启动爬虫
from scrapy import cmdlinecmdline.execute('scrapy crawl MySpider'.split()) 转载于:https://my...
2018-03-14 10:18:00
251
转载 MySQL查看各个库的大小
SELECT `TABLE_SCHEMA`, SUM(`DATA_LENGTH`)/1024/1024, SUM(`INDEX_LENGTH`)/1024/1024, SUM(`DATA_LENGTH`+`INDEX_LENGTH`)/1024/1024 FROM `information_s...
2018-03-14 09:51:00
429
转载 记一次jenkins构建故障
今天构建时一直卡在下载某个jar包那里,在开发小伙伴的帮助下,找到了解决方案: 修改maven的配置文件(/usr/local/apache-maven/conf/settings.xml),在<mirrors></mirrors>标签中新增以下内容: <mi...
2018-03-06 17:54:00
216
转载 sqlalchemy数据库到模型转换神器——sqlacodegen
使用sqlalchemy时会遇到这个问题:必须先创建好模型才能使用,字段少的表还好,三下五除二就把模型弄好了,但对于那些字段多的表,而且还有N个需要弄的表,那简直是要命啊!此时,如果你懂得使用sqlacodegen,那这一切就会变得很简单。 安装很简单,直接用pip装就行了: pip in...
2018-02-01 15:02:00
604
转载 模型SQL VS models
# SQLSELECT * FROM `example`# modelsExample.objects.all() # SQLSELECT `name` FROM `example`# modelsExample.objects.values('name')# SQLS...
2018-02-01 10:16:00
120
转载 Django学习笔记
安装篇 Django同时支持Python2和Python3,本人喜欢用Python3,因为用Python2会出现一些烦人的编码问题。 安装环境: 操作系统:Windows 7 Python版本:3.6.3 安装很简单,只需执行一行命令,前提是你已经安装了pip,命令如下: pip...
2018-01-31 19:35:00
93
转载 在Python的虚拟环境中安装pywin32
平时使用Python时会安装各种各样的第三方库,装多了之后就可能发生冲突,此时就要祭出我们的大杀器——虚拟环境,用PyCharm的童鞋要搭建一个虚拟环境十分简单,怎么搭建在这里我就不说了,不知道的请自行搜索。相信有不少童鞋有遇到和我一样的情况:有些第三方库的安装包是exe类型的,而且安装时它只...
2018-01-26 15:24:00
323
转载 Scrapy爬虫学习笔记
声明 本文仅当学习交流爬虫技术,请读者在爬取相应网站时注意控制好频率,以免对目标网站造成不必要的影响,多谢合作! 创建项目 # 格式scrapy startproject 项目名称# 范例scrapy startproject MySpider# 创建好之后的文件架构如下...
2017-12-06 15:25:00
167
转载 nginx禁止通过IP的方式访问http、https
nginx常用于反向代理,这个是家喻户晓的,最常用的非80端口(http)和443端口(https)莫属了,一个80端口通常会反向代理多个域名,如果我们不禁止通过IP的方式访问,将会产生下列现象: 某某某随便将一个域名指向你家的服务器IP,就可以通过他们的域名访问你们的服务器了。 要杜绝以...
2017-11-04 09:18:00
2092
转载 那些年写爬虫时遇到的一些疑难杂症
2017年11月1日 今天在爬取“房多多”的小区时,遇到这么一个问题: 链接:http://esf.fangdd.com/shenzhen/xiaoqu/?query=特发和平里花园 根据小区名搜索,如果有搜索结果,并且与我搜索的小区名一样就进入该小区的链接,然后爬取详情,但...
2017-11-01 09:55:00
69
转载 安装docker
本人使用的环境是CentOS 6.9 64位操作系统。 # 安装yum -y install epel-releaseyum -y install docker-io# 启动service docker start 获取镜像 docker pull NAME[:TAG] ...
2017-09-01 18:02:00
72
转载 jenkins的安装
jenkins是基于java开发的,java是跨平台的,所以jenkins也是跨平台的,你可以在官方下载页面找到适合你系统的安装方法。 我的系统是CentOS,所以我采用yum方式安装。 wget -O /etc/yum.repos.d/jenkins.repo https://pkg.j...
2017-08-17 10:13:00
114
转载 源码安装zabbix
安装nginx 还没安装nginx的童鞋可按照我之前写的一篇博客安装,已经安装过的童鞋只需修改配置文件,使其支持php即可,本文的nginx配置文件采用的是我博客教程中的配置文件。 安装mysql 还没安装mysql的童鞋可按照我之前写的一篇博客安装,建议通过源码包安装或二进制包安装...
2017-08-05 16:25:00
147
转载 源码方式安装nginx
yum -y install wgetwget http://nginx.org/download/nginx-1.12.1.tar.gz -P /usr/local/src/tar xzf /usr/local/src/nginx-1.12.1.tar.gz -C /tmp/cd /t...
2017-08-04 10:21:00
150
转载 二进制方式安装mysql
yum -y install wgetwget https://dev.mysql.com/get/Downloads/MySQL-5.6/mysql-5.6.37-linux-glibc2.12-x86_64.tar.gz -P /usr/local/src/tar xzf /usr/l...
2017-08-04 09:55:00
93
转载 实现在脚本中修改crontab
直接修改/var/spool/cron/root文件。 转载于:https://my.oschina.net/yestreenstars/blog/1490592...
2017-07-27 17:43:00
467
转载 redis安装与配置
安装 wget http://download.redis.io/releases/redis-4.0.1.tar.gztar xzf redis-4.0.1.tar.gzcd redis-4.0.1/makemkdir -p /usr/local/redis/{bin,etc}...
2017-07-27 10:09:00
71
转载 阿里云SDK的使用(安全组篇)
因工作需要,想通过脚本控制阿里云的安全组,通过阿里云官网了解到有两种方式可以实现,一是通过API的方式,二是通过SDK的方式,昨天尝试了一下API的方式,没有成功,网上也没查到相关资料,只好转战SDK,接下来说说SDK怎么使用。 首先你需要创建一个RAM子账号:打开阿里云管理控制台,在“产品...
2017-07-12 09:41:00
1312
转载 Django模板for循环索引值取余
今天遇到一个需求:遍历一个列表,每两个值为一组。 {% for item in my_list %} {% if forloop.counter|divisibleby:2 %} ... {% endif %}{% endfor %} ...
2017-07-11 10:22:00
2229
转载 查看通过yum安装的软件被装到哪些位置
比如我要查看openvpn被安装到哪些位置: [root@localhost ~]# rpm -qa | grep openvpnopenvpn-2.4.3-1.el6.x86_64[root@localhost ~]# rpm -ql openvpn-2.4.3-1.el6.x86_6...
2017-07-06 09:53:00
73
转载 解决“Cannot add or update a child row”报错
今天在给一张表添加外键时出现如下报错: Cannot add or update a child row: a foreign key constraint fails (`test`.`#sql-206b_231`, CONSTRAINT `FK_responsemessage` F...
2017-06-29 10:52:00
1633
转载 解决“Cannot add foreign key constraint”
今天在添加外键时出现报错:“Cannot add foreign key constraint”,折腾一番后找到了原因,特此记录一下。 现有以下两张表: 表名 主键 responsemessage id ...
2017-06-29 10:11:00
397
转载 Linux系统中安装pip
# 安装依赖包yum -y install zlib-devel openssl-devel readline-devel# 虽然不安装这两个包不会影响python的安装,但在安装setuptools等工具时会报错。# 如果不安装zlib-devel包,在安装setuptools时就会报...
2017-06-27 17:58:00
112
转载 爬取翻页URL不变的网站
今天爬取一个网站时发现翻页URL不变,估计是做了重定向,不过没关系,再艰难的网站也能爬下来。 刚开始没什么思路,查看了网页的源代码,发现它的翻页是通过JS控制的,不像一些普通网站直接把下一页的URI写在当前页面中,后来想到这种情况有可能是通过XHR传数据实现的,于是打开开发者工具,发现压根就...
2017-06-23 12:27:00
4181
转载 LVM快照实验
本次实验是在VMWare上的Linux虚拟机实现的,步骤如下: 先给虚拟机添加一块硬盘,再启动虚拟机,通过“fdisk -l”命令查看新硬盘的标识符,我这里显示的是“/dev/sdb”。 初始化硬盘: pvcreate /dev/sdb 创建一个卷组用于实验: vgcreate te...
2017-06-21 16:07:00
230
转载 LVM逻辑卷扩容
本文以VMWare上运行的Linux虚拟机LVM逻辑卷扩容为例。 首先,在虚拟机上新增一块硬盘,再重启虚拟机使其生效。 重启后用“fdisk -l”命令查看新硬盘的标识符,我这里显示的是“/dev/sdb”。 接下来使用pvcreate命令将硬盘初始化: pvcreate /dev/s...
2017-06-21 10:13:00
184
转载 通过465端口发送邮件
一般情况下我们都是使用25端口来发送邮件,但有时候因为某些原因,25端口被禁止使用了,此时,如果465端口能够使用,我们就可以用465端口来发送邮件。 不知道阿里云什么时候上的新规,说专用网络(VPC)不允许开放25端口,也不允许访问外部邮件服务器的25端口,说是防垃圾邮件,禁止服务器开放2...
2017-06-20 17:49:00
1673
转载 常见面试题总结
问:简述一下正向代理和反向代理。 答:正向代理的目的是隐藏客户端,反向代理的目的是隐藏服务端。 转载于:https://my.oschina.net/yestreenstars/blog...
2017-05-05 14:16:00
70
转载 常用命令
grep -l 只打印符合过滤条件的文件的文件名 lsof -n 默认是以域名的形式输出,加上该参数后便以IP的形式输出 -P 默认是以服务名的形式输出,加上该参数后便以端口号的形式输出 ...
2017-04-19 10:12:00
62
转载 mysqldump常用参数
mysqldump是用来备份MySQL数据库的,下面来介绍一下常用的参数: --skip-extended-insert mysqldump默认会将所有记录都合并在一行insert语句中,如果使用了该参数,就可以使每条记录都有单独的insert语句了。 温馨提示:一般在导出大表时才...
2017-03-31 10:00:00
104
转载 openpyxl学习笔记
# 导入第三方库openpyxlfrom openpyxl import load_workbook# 打开文件名为“test.xlsx”的excel文件wb = load_workbook('test.xlsx')# 备注:openpyxl只能操作.xlsx后缀的excel文件,旧...
2017-02-27 17:02:00
128
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人