FlareSolverr 是一个基于浏览器自动化技术的反爬虫解决方案。它可以应对一些比较复杂的反爬虫策略,如 Cloudflare、hCaptcha 等,并提供了简单易用的 API 接口。
具体来说,FlareSolverr 就是一个被动式的浏览器渲染服务,它使用了 Headless Chrome 和 Puppeteer 技术来模拟人工操作浏览器的行为,并通过自定义的 JavaScript 脚本和与浏览器进行交互,最终获取网页中的数据或跳过反爬虫策略。
在使用 FlareSolverr 时,你需要先启动一个 FlareSolverr 服务器,然后通过发送 HTTP 请求的方式来获取解决后的结果,用来过Cloudflare非常好用
1、拉取flaresolverr容器
docker pull flaresolverr/flaresolverr
2、运行flaresolverr容器
docker run -d --name=flaresolverr -p 8191:8191 -e LOG_LEVEL=info --restart unless-stopped ghcr.io/flaresolverr/flaresolverr:latest
3、用curl工具测试环境
curl -L -X POST 'http://192.168.30.253:8191/v1' -H 'Content-Type: application/json' --data-raw '{
"cmd": "request.get",
"url":"http://www.google.com/",
"maxTimeout": 6000
}'