爬虫
文章平均质量分 75
zhanghl150426
这个作者很懒,什么都没留下…
展开
-
python爬取数据保存为Excel格式
#encoding:'utf-8' import urllib.request from bs4 import BeautifulSoup import os import time import xlrd import xlwt from xlutils.copy import copy def getDatas(): # url="https://movie.douban.com/to...原创 2018-08-24 17:25:30 · 4224 阅读 · 0 评论 -
python爬取数据保存为Json格式
#encoding:'utf-8' import urllib.request from bs4 import BeautifulSoup import os import time import codecs import json #找到网址 def getDatas(): # 伪装 header={'User-Agent':"Mozilla/5.0 (X11; CrOS i6...原创 2018-08-24 17:26:41 · 9110 阅读 · 0 评论 -
python爬取数据保存为MySQl格式
#encoding:'utf-8' import urllib.request from bs4 import BeautifulSoup import os import time import pymysql import xlwt def getDatas(): # url="https://movie.douban.com/top250" url="file:///E:/...原创 2018-08-24 17:29:51 · 369 阅读 · 0 评论 -
python爬取数据保存为txt格式
#encoding:'utf-8' import urllib.request from bs4 import BeautifulSoup import os import time #找到网址 def getDatas(): url="https://movie.douban.com/top250" # url="file:///E:/scrapy/2018-04-27/movi...原创 2018-08-24 17:28:37 · 11681 阅读 · 1 评论 -
python爬取数据保存为图片
#encoding:'utf-8' import urllib.request from bs4 import BeautifulSoup import os #找到网址 def getDatas(): # 伪装 header={'User-Agent':"Mozilla/5.0 (X11; CrOS i686 2268.111.0) AppleWebKit/536.11 (KHT...原创 2018-08-24 17:32:13 · 1641 阅读 · 0 评论 -
python爬取数据hesder设置cookie
#encoding:'utf-8' import urllib.request from bs4 import BeautifulSoup import os import time import pymysql import xlwt import requests import json def getDatas(): url = 'https://www.uchuanbo.com/...原创 2018-10-26 13:24:57 · 795 阅读 · 0 评论