爬虫
GoldenFong
这个作者很懒,什么都没留下…
展开
-
爬虫-知乎-评论
思路&代码参考微信公众号:Python与Excel之交,作者小刀以知乎热搜《男子因太能吃被「自助」餐厅拉黑,餐厅此种行为合法吗?》为例网页:男子因太能吃被「自助」餐厅拉黑,餐厅此种行为合法吗? - 知乎评论进入浏览器的开发者模式评论往下拉就会自动生成下一页,会有新的数据包真实的urlhttps://www.zhihu.com/api/v4/questions/499739058/answers?include=data%5B%2A%5D.is_normal%2C..原创 2021-11-18 21:32:35 · 777 阅读 · 0 评论 -
爬虫-腾讯视频-弹幕&评论
以电视剧《当家主母》为例网页:当家主母 第01集_1080P在线观看平台_腾讯视频弹幕进入浏览器的开发者模式真实urlhttps://mfm.video.qq.com/danmu?otype=json&callback=jQuery19109520777980786752_1637214421099&target_id=7517171629%26vid%3Dr00419n203n&session_key=0%2C0%2C0×tamp=15.原创 2021-11-18 15:13:05 · 1046 阅读 · 0 评论 -
爬虫-芒果TV-弹幕&评论
以电影《怒火.重案》为例子网页:高清视频在线观看 - 芒果TV弹幕进入浏览器的开发者模式弹幕放在0.json里面,每分钟生成一个json真实网址:https://bullet-ws.hitv.com/bullet/2021/11/17/231055/14289123/0.json代码import pandas as pdimport requestsimport timeheaders = { 'user-agent':'Mozilla/5.0 ..原创 2021-11-18 01:03:09 · 1600 阅读 · 0 评论 -
selenium
#导入模块from selenium import webdriver#制定网址url = 'https://www.taobao.com'#打开浏览器,指定为chrome浏览器,chromedrive是drive = webdriver.Chrome(r"C:\Program Files\Google\Chrome\Application\chromedriver.exe")#加载网页drive.get(url)#目标获取手机名称、价格、月销量、评论数#获取所有商品的链接,单数的ele.原创 2021-11-03 17:12:23 · 99 阅读 · 0 评论 -
requests
import requestsurl = 'https://rate.tmall.com/list_detail_rate.htm?itemId=637427053732&spuId=1956270204&sellerId=2206497777597&order=3¤tPage=1&append=0&content=1&tagId=&posi=&picture=&groupId=&ua=098%23E1.原创 2021-11-03 17:10:24 · 686 阅读 · 0 评论