爬虫
文章平均质量分 81
李耳王
这个作者很懒,什么都没留下…
展开
-
Python爬取网站数据并生成Excel
# -*- coding: utf-8 -*- import os import re import sys import ssl import json import time import xlwt import urllib import urllib2 import shutil from pyExcelerator import * # 取消证书验证 context = ssl._...原创 2018-10-31 16:12:13 · 10737 阅读 · 2 评论 -
Python爬取用户头像及昵称
# -*- coding: utf-8 -*- import os import re import sys import ssl import urllib import urllib2 import shutil from pyExcelerator import * # 取消证书验证 context = ssl._create_unverified_context() # 爬虫基础地址...原创 2018-10-31 16:15:27 · 4057 阅读 · 2 评论 -
Python爬取网站图片的2种常见处理
分析网站数据接口,获取图片地址并下载 # -*- coding: utf-8 -*- import os import re import sys import ssl import xlwt import time import _thread import requests import pymysql import threading # 自定义线程 class myThread(thr...原创 2019-07-05 10:07:46 · 2155 阅读 · 0 评论 -
Python连接数据库并查询所需数据的实践
# -*- coding: utf-8 -*- import os import requests import pymysql import _thread #import threading # 自定义下载目录 path = 'F:/Reptilian/ysj/' # 线程锁 #lock = threading.Lock() # 线程树 threadNum = 50 # 请求头定义 ...原创 2019-07-05 09:57:25 · 1194 阅读 · 0 评论