Python
cnzf1
业精于勤 荒于嬉;行成于思 毁于随;
展开
-
Python爬虫的工具列表
这个列表包含与网页抓取和数据处理的Python库网络通用urllib -网络库(stdlib)。requests -网络库。grab - 网络库(基于pycurl)。pycurl - 网络库(绑定libcurl)。urllib3 - Python HTTP库,安全连接池、支持文件post、可用性高。httplib2 - 网络库。RoboBrowser - 一个简单的、极具Pyt转载 2015-11-04 23:30:35 · 1557 阅读 · 0 评论 -
Python单例模式
class Singleton(object): def __new__(cls, *args, **kwargs): if not hasattr(cls, '_instance'): orig = super(Singleton, cls) cls._instance = orig.__new__(cls) ...原创 2018-07-26 10:28:06 · 382 阅读 · 0 评论 -
python程序运行禁止生成pyc文件的办法
1、临时生效:export PYTHONDONTWRITEBYTECODE=False2、永久生效:在~/.bash_profile中添加:export PYTHONDONTWRITEBYTECODE=False执行source ~/.bash_profile生效原创 2018-07-26 10:24:29 · 3103 阅读 · 0 评论 -
ImportError: pycurl: libcurl link-time version (7.29.0) is older than compile-time version (7.59.0)
Traceback (most recent call last): File "/data/server/server.py", line 17, in <module> AsyncHTTPClient.configure("tornado.curl_httpclient.CurlAsyncHTTPClient", max_clients=100) File "/us...原创 2018-07-26 10:12:39 · 2286 阅读 · 0 评论 -
ImportError: pycurl: libcurl link-time ssl backend (nss) is different from compile-time ssl backend
[root@VM_0_10_centos 529]# python3Python 3.6.2 (default, Jun 20 2018, 09:40:19)[GCC 4.8.5 20150623 (Red Hat 4.8.5-28)] on linuxType "help", "copyright", "credits" or "license" for more information....原创 2018-07-26 10:11:23 · 3704 阅读 · 0 评论 -
No module named 'pycurl'
/data//logic/server.py:12: MonkeyPatchWarning: Monkey-patching ssl after ssl has already been imported may lead to errors, including RecursionError on Python 3.6. Please monkey-patch earlier. See http...原创 2018-07-26 10:09:07 · 2814 阅读 · 0 评论 -
Splash动态页面爬虫
Splash是一个Javascript渲染服务。它是一个实现了HTTP API的轻量级浏览器,Splash是用Python实现的,同时使用Twisted和QT。Twisted(QT)用来让服务具有异步处理能力,以发挥webkit的并发能力。scrapy-splash利用Splash将javascript和Scrapy集成起来,使得Scrapy可以抓取动态网页。地址:http://scrap原创 2017-12-25 19:26:39 · 3007 阅读 · 0 评论 -
pyinstaller打包运行报错failed to execute script main
pyqt5写完win32 应用程序后,经过pyinstaller打包成单个文件,运行弹出错误提示框:failed to execute script mainpycharm中pyinstaller打包参数:Program:C:\Python\Python35\Scripts\pyinstaller.exeParameters: -w -F $FileName$Working directo...原创 2017-06-08 00:32:12 · 68511 阅读 · 20 评论 -
pip install的时候报错timed out
问题:File "c:\python\python35\lib\site-packages\pip\_vendor\requests\packages\urllib3\response.py", line 357, in stream data = self.read(amt=amt, decode_content=decode_content)File "c:\python\pyt原创 2017-04-30 18:37:53 · 12199 阅读 · 1 评论 -
Python 资源大全中文版
Python 资源大全中文版我想很多程序员应该记得 GitHub 上有一个 Awesome - XXX 系列的资源整理。awesome-python 是 vinta 发起维护的 Python 资源列表,内容包括:Web框架、网络爬虫、网络内容提取、模板引擎、数据库、数据可视化、图片处理、文本处理、自然语言处理、机器学习、日志、代码分析等。由伯乐在线持续更新。Awesome 系列虽然挺全,但转载 2016-07-07 22:26:02 · 8214 阅读 · 0 评论 -
Python 资源大全
Awesome Python ,这又是一个 Awesome XXX 系列的资源整理,由 vinta 发起和维护。内容包括:Web框架、网络爬虫、网络内容提取、模板引擎、数据库、数据可视化、图片处理、文本处理、自然语言处理、机器学习、日志、代码分析等。伯乐在线已在 GitHub 上发起「Python 资源大全中文版」的整理。欢迎扩散、欢迎加入。https://github.com/jobbo转载 2016-04-06 19:20:42 · 1660 阅读 · 0 评论 -
python工程字节码形式发布,隐藏源码
pyc文件是py文件编译后生成的字节码文件;pyc文件经过python解释器会生成机器码来直接运行,所以pyc文件是可以跨平台部署的,同时可以用来隐藏源代码。1、生成单个pyc文件python -m foo.py或者import py_compilepy_compile.compile('/path/to/foo.py')2、批量生成pyc文件python -m compilea...原创 2018-12-01 20:37:17 · 1359 阅读 · 0 评论