![](https://img-blog.csdnimg.cn/2020082021241275.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
爬虫
爬虫程序
言小溪
一碰编程就上瘾
展开
-
playwright 关闭无痕浏览模式
使用 launchPersistentContext 即可,需提供一个文件夹存放 cookie 等数据// @ts-checkconst { chromium } = require("playwright");const path = require('path');(async () => { // Make sure to run headed. const browser = await chromium.launchPersistentContext(path.re原创 2022-02-18 23:24:29 · 4945 阅读 · 0 评论 -
使用 json 进行谷歌浏览器自动化测试
自己开发的库 jsonsepgithub : https://github.com/enncy/jsonsep示例只需要编写下面一样的 json ,就可以让浏览器自动运行,原理就是通过解析 json 进行浏览器的调用,底层通过 puppeteer 实现{ "options": { "executablePath": "C:/Program Files/Google/Chrome/Application/chrome.exe", "defaultViewport原创 2022-01-12 23:58:37 · 501 阅读 · 0 评论 -
python + selenium 爬虫 基础操作
首先在 cmd 执行下面代码,下载 selenium 库pip install selenium如果你使用的是 anaconda , 使用这个打开命令行,并且执行上面语句下载浏览器驱动 chromedriver打开你的谷歌浏览器 => 设置 => 关于 chrome找到你当前的谷歌浏览器版本,例如 96.0.xxxx进入下面网站,找到对应的版本第一个,点击下载https://chromedriver.chromium.org/downloads下载的文件保存到 c:/原创 2021-12-28 18:19:14 · 510 阅读 · 0 评论 -
Java + Selenium 元素等待工具类
目录函数说明源码使用示例我们平常在使用selenium爬虫的时候,通常会遇到登录这个操作,然鹅登录的时候,如果对方服务器反应时间太久,或者太快,时间不稳定,那么此时进行登录验证,密码是否正确,信息是否填对的时候,就会非常麻烦。在我查阅大量资料过后,仍然找不到满意的元素等待方法,所以索性自己实现一个,在这里分享给大家。函数说明函数说明waitElement()等待指定元素。传入WebDriver 对象,和selenium的By对象。如果对象存在,执行回调,或者抛出异常wa原创 2020-08-27 19:20:48 · 299 阅读 · 0 评论 -
JAVA 【爬虫】 Selenium 无头浏览,禁止加载图片,启动参数,失效,无效
JAVA + Selenium 无头浏览,禁止加载图片,启动参数,失效,无效如果无头浏览,禁止加载图片,启动参数,失效,无效,命令参数写错,无头浏览:- -headless禁止加载图片:blink-settings=imagesEnabled=false可以看一下自己的selenium的版本是不是太低了,如果selenium版本低于3.5可能会失效。或者chromedriver.exe...原创 2020-02-08 16:37:11 · 4721 阅读 · 4 评论 -
JAVA 【爬虫】Selenium—自动化测试工具
JAVA爬虫 selenium自动化测试JAVA爬虫 selenium自动化测试的学习记录!为什么用—Selenium初识-selenium使用selenium遇到的问题,和解决方法JAVA爬虫 selenium自动化测试的学习记录!因为最近新型冠状病毒的事件,在家闲的发慌,加上一直对爬虫有独特的喜爱,所以我打算开始我的java爬虫学习之路。(本人大一,有什么说错的请大家纠正!)为什么用—S...原创 2020-02-08 13:41:23 · 2298 阅读 · 0 评论