爬虫
一叶知秋-
这个作者很懒,什么都没留下…
展开
-
Requests+正则表达式爬取猫眼电影案例
代码 import requests #要实现快速抓取的话,就要用进程池 from requests.exceptions import RequestException from multiprocessing import Pool import re import json def get_one_page(url): try: response = reque...原创 2019-04-05 21:46:13 · 321 阅读 · 0 评论 -
mac安装pyspider和pycurl踩过的坑
使用pip3 install pyspider提示错误: "python setup.py egg_info" failed with error code 1 in /private/var/folders/....../pycurl 意思就是没有pycurl 然后用pip3 install pycurl提示错误 "python setup.py egg_info" failed wit...原创 2019-04-08 13:50:25 · 216 阅读 · 0 评论