Python 爬虫示例
Python 爬虫示例
懒笑翻
这个作者很懒,什么都没留下…
展开
-
根据豆瓣API获取豆瓣电影数据并存入数据库
# encoding: utf-8 """ @author: lanxiaofang @contact: [email protected] @software: PyCharm @file: doubanapi.py @time: 2020/4/11 11:34 """ import datetime import requests from time import sleep import pymysql import random header = { 'Accept': 'app.原创 2021-02-05 19:04:22 · 2195 阅读 · 1 评论 -
MDPI 爬取 'title_link', 'author_list', 'cited_by', 'viewed_by' Demo 数据保存至CSV文件
URL : https://www.mdpi.com/search?sort=article_citedby&page_no=0&page_count=50&year_from=1996&year_to=2020&journal=cells&view=default Page : Demo : # encoding: utf-8 "...原创 2020-05-03 11:35:10 · 691 阅读 · 0 评论 -
Python 获取LOL 皮肤(一)
print("hello") import requests """ 1、获取url 网址 2、发送请求 3、提取数据 4、保存 可以加延迟或者多加几个user-agent Request URL:https://game.gtimg.cn/images/lol/act/img/js/heroList/hero_list.js Request Method:GET """"" heade...原创 2020-01-12 21:19:16 · 542 阅读 · 1 评论 -
Python 获取LOL所有英雄的传说
import requests import time import random headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.104 Safari/537.36" } def g...原创 2020-01-13 21:43:33 · 507 阅读 · 3 评论 -
Python 获取LOL皮肤(二) 加了进程挂起随机时间
import requests import time import random headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.104 Safari/537.36" } def g...原创 2020-01-13 15:12:33 · 290 阅读 · 0 评论