- 博客(11)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 scrapy学习之爬取顶点小说数据（转）
1.爬取网站https://www.x23us.com2.转出处https://cuiqingcai.com/3472.html3.遇到的问题3.1 mysql的模块导入问题修改为pymysql3.2 scrapy默认安装的python版本问题最开始默认是安装到python2.7版本，后面需要重新安装到python3.5的版本3.3 顶点网站改为https://...
2018-09-29 17:24:38
304
原创 ubuntu下python3安装scrapy，OpenSSL
环境：ubuntu 16.04 , python3.5.1+安装顺序如下：sudo apt-get install build-essentialsudo apt-get install python3-devsudo apt-get install libxml2-de;sudo apt-get install libxslt1-devsudo apt-get inst...
2018-09-29 16:37:33
496
原创 git及githup配置使用
1.在githup上注册一个账号"luweiwei1111"并创建一个项目python_spiderhttps://github.com/luweiwei1111/python_spider/2.本地Ubuntu上安装gitapt install git-all3.安装完成后克隆一段代码git clone https://github.com/luweiwei1111/pyth...
2018-09-29 15:04:06
404
原创 python多线程实例
#coding=utf-8import urllib2#from HandleJs import Py4Jsimport threadingimport sqlite3import sysimport time#from translate import Translatorimport sysreload(sys)sys.setdefaultencoding('utf-8...
2018-09-27 17:41:27
202
转载 Python面试题 https://github.com/taizilongxu/interview_python
转载https://github.com/taizilongxu/interview_python
2018-09-25 16:08:15
719
原创 python实现在线翻译
对于需要大量翻译的数据，人工翻译太慢，此时需要使用软件进行批量翻译。1.使用360的翻译（https://fanyi.so.com/index/search）def fanyi_word_cn(string): url="https://fanyi.so.com/index/search" #db_path = './db/tasks.db' Form_Data=...
2018-09-20 16:41:30
2539
原创 Django搭建web服务
Django 自称是“最适合开发有限期的完美WEB框架”。本文参考《Django web开发指南》，快速搭建一个blog 出来，在中间涉及诸多知识点，这里不会详细说明，如果你是第一次接触Django ，本文会让你在感性上对Django有个认识，完成本文操作后会让你有兴趣阅读的相关书籍和文档。废话少说，come on!! 本操作的环境：===================Win...
2018-09-13 10:45:25
1042
原创 Python3 Scrapy网络爬虫环境搭建（Windows平台）
安装过程安装基础环境1.Python安装https://www.python.org/downloads/windows/安装Python安装包，一路Next将Python的安装目录添加到环境变量Path中win + r 输入Cmd打开命令行窗口，输入Python 测试是否安装成功2.安装piphttps://pypi.python.org/pypi/pippip的...
2018-09-08 00:17:18
371
原创 Linux 信号详解二（信号分类，信号处理，kill）
信号分类信号分为可靠信号和不可靠信号不可靠信号的缺点 ①：处理完信号，需要重新再注册信号；②信号可能丢失。Linux已经对缺点①做了优化，现在的不可靠问题主要指的是信号可能丢失信号还可以分为实时信号和非实时信号--一般不可靠信号指的是前32种信号，这32种信号已经有了预定义值，每个信号有了确定的用途及含义，并且每种信号都有各自的缺省动作--可靠信号指的后32种信号--非实时信号都不支...
2018-09-04 10:18:46
385
原创 Linux信号详解一
SIGABRT 进程停止运行 6SIGALRM 警告钟 SIGFPE 算述运算例外SIGHUP 系统挂断SIGILL 非法指令SIGINT 终端中断 2SIGKILL 停止进程（此信号不能被忽略或捕获）SIGPIPE 向没有读的管道写入数据SIGSEGV...
2018-09-04 10:18:09
143
原创 shell脚本常用语法
1.判断字符串长度是否为0delete="test"if [ ! -z $delete ]then echo "delete is not NULL" exit 1else echo "delete is NULL"fi2.比较2.1 判断文件是否存在if [ -f "vasys_version.tmp" ]; then rm va...
2018-09-04 09:38:37
230
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人