![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
文章平均质量分 59
史上最强大乘渡劫老怪
总结与分享是博客的精髓
展开
-
Node.Js爬虫
感觉js写爬虫比python更方便,爬数据果然还是要弱语言才有效率创建简单的Node工程,利用axios发送请求安装node创建示例代码//创建服务,监听8887端口var http = require('http');const axios = require('axios');http.createServer(function (request, response) { //axios设置header const axiosLearn= axios.create({原创 2021-11-22 16:35:58 · 412 阅读 · 0 评论 -
autolt的上传文件的简单概括使用
具体的操作看这位兄台的,很全 添加链接描述ControlFocus("打开","","Edit1");WinWait("[CLASS:#32770]","",10)ControlSetText("打开","","Edit1","D:\360MoveData\Users\疯子似的少年\Desktop\自媒体\license.mp3");Sleep(2000);ControlClick("打开","","Button1");...原创 2020-07-03 16:25:55 · 404 阅读 · 0 评论 -
Jsoup获取元素的属性值
添加链接描述遇到js对象时可以将其转为json对象原创 2020-07-23 16:25:24 · 852 阅读 · 0 评论 -
自己摸索的关于腾讯视频的几个接口
一部动漫详情页网址// q后边加你想要的动漫名// ||// \/https://v.qq.com/x/search/?q=%E4%B8%80%E4%BA%BA%E4%B9%8B%E4%B8%8B&stag=102&smartbox_ab=一部动漫id的获取该id就放在源文件下,直接用选择器定位到就好,放图剧集列表属于get原创 2020-07-22 16:53:10 · 5804 阅读 · 0 评论 -
Java关于使用selenium进行cookie登录免验证的,拿b站实例
无非就三点:获取登录cookie,序列化保存到本地,然后再反序列化读取出来,加入到webdriver中代码如下获取登录cookie,序列化保存到本地的操作public static void getcookies() throws Exception { // TODO Auto-generated method stub System.setProperty("webdriver.chrome.driver", "D:\\ChromeDriver\\chromed原创 2020-07-03 11:55:39 · 1139 阅读 · 3 评论 -
关于使用jsoup以访问接口的方式进行爬虫(涵盖知识 jsoup模拟发送post请求)
仍是以b站为例,不使用selenium的方式来通过接口实现在b站发送评论 发送评论都是post请求,需要登录才能进行后继工作,所以咱的任务很清晰 先寻找对应的接口,这里我们通过抓,工具,或者f 12,找出,发送评论的接口,这里,我已经找出来了,就是这个仔分分析,这个接口,发现里面有一个,some,对塔放,不对,塔,里面的数据,就是就是,咱们,想要,发送评论,咱们只要把想要发送的评论,数据添加到这个请求里面就行。在发送选修之前有一有几个比较重要的参数需要设置一下一就是这个...原创 2020-07-07 13:12:06 · 553 阅读 · 0 评论 -
关于jsoup的常用方法
插播下jsoup的使用,解析xml文件很方便Document parse = Jsoup.parse(new URL("https://api.bilibili.com/x/v1/dm/list.so?oid=81111362"), 2000); Elements d = parse.getElementsByTag("d"); for (Element element : d) { System.out.println(element.text()原创 2020-07-07 20:42:49 · 300 阅读 · 0 评论 -
关于爬虫selenium的初使用
第一步导入maven依赖 <!-- selenium-java客户端段 --> <dependency> <groupId>org.seleniumhq.selenium</groupId> <artifactId>selenium-java</artifactId> <version>3.141.59</version>原创 2020-06-20 20:51:29 · 295 阅读 · 0 评论