- 博客(4)
- 收藏
- 关注
原创 python模仿scrapy框架实现一个通用爬虫
不适用框架,写一个功能相对较全面的爬虫,包含监控网站更新、代理ip、限流器、提取链接、重试下载等基本功能代码如下:主函数:def run(self): while not self.crawler_queue.empty(): url_str = self.crawler_queue.get() print("url_str is ::::::{}"....
2018-12-27 20:49:47
314
原创 字符串的循环移动(python实现)
给出一个字符串abc,给出一个让循环左移的位数得到结果:下面两种方法:第一种:以字符串操作方式解决第二种:以数组操作方式解决或者可以用字符串切片拼接代码如下:...
2018-12-17 11:41:30
1044
原创 Ubuntu下Nginx和gunicorn的部署与测试(python)
1.先检查gcc输入gcc 回车查看返回信息如果没有的话按照提示执行以下命令安装: sudo apt install gcc2.下载依赖环境: sudo apt-get install zlib1g-dev #注意此处是'1g'不是'lg' sudo apt-get install openssl libssl-dev sudo apt-get install libpcre3 l...
2018-12-03 22:21:40
590
原创 python 中__new__ , __init__以及一些其他魔法函数的小总结
_new_(cls,*args,**kwargs)创建一个实例(通常是cls的,也可以是其他类型的实例),至少要有一个参数cls,代表当前类, __new__必须要有返回值,返回实例化出来的实例,__new__方法主要是当继承一些不可变的class时 (比如int,str,tuple),提供给我们一个自定义这些类的实例化过程的途径_init_(self,*args,**kwargs)对象...
2018-11-20 11:16:26
229
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人