爬虫
文章平均质量分 61
烤鸭的世界我们不懂
烤鸭的世界我们不懂。
展开
-
某音数据分析
大家好,我是烤鸭: 某音竟然有pc版了,不过搜索的数据有限,会限制条数,亲测只能搜索400条数据,简单分析下过程。工具使用java + chromedriver + fiddlerjava + selenium 自动化网页,需要登录,可以登录一次共享cookie@Testpublic void testXyin() { String keyWord = "旅游"; try { // 调用chrome driver System原创 2022-03-02 20:45:06 · 790 阅读 · 0 评论 -
模拟微信自动化发送(微信公众号文章自动点击)
大家好,我是烤鸭: 最近在搞数据抓取,发现之前的方式不太行了,分享个新方式,仅技术分享。需要的工具Java(jdk1.8)FiddlerPython(3.8)抓取列表信息设置一下过滤域名,*.weixin.qq.com;点公众号列表,获取到的列表地址:https://mp.weixin.qq.com/mp/profile_ext?action=getmsg&__biz=MzA3NTAyNDcxNw==&f=json&o原创 2022-02-19 06:22:31 · 2495 阅读 · 0 评论 -
java 爬虫 抓取 网易云音乐
大家好,我是烤鸭: 今天和大家交流一下爬虫,抓取网易云音乐。只讨论技术,不提倡其他的。1. 找音乐源地址谷歌浏览器 F12 ,找请求类型是 Media的。 2. 找请求链接切换请求类型到 All,看 Response 包含 mp3 链接的。 3. 分析请求请求头就不说了,主要是 formData 中有两个加密参数 par...原创 2018-10-11 09:04:16 · 5548 阅读 · 4 评论 -
爬虫,关于 video 标签 src 带有blob:http的 一些想法
大家好,我是烤鸭: 之前玩爬虫的时候,看到过video标签中src属性引入的blob:http:xxxx,当时没找到解决思路,今天又遇到类似问题,就试着找了一下。这是有人问过https://vimeo.com/这个网站的视频怎么下载。 https://superuser.com/questions/1033563/how-to-download-video-with-...原创 2018-09-14 17:56:49 · 67248 阅读 · 40 评论