2021最新爬取百度关键词时出现,百度安全验证,解决方法

在2021年,直接爬取百度内容会遇到安全验证,因为浏览器中存在cookie和JS验证。为绕过这个问题,需要在本地设置反向浏览器来输出数据。以下PHP代码示例展示了如何通过HTTP代理实现这一操作,包括设置超时时间、代理类型,并关闭SSL证书验证。
摘要由CSDN通过智能技术生成

PHP代码

其他代码也可以,其实就是利用本机浏览器反向输出百度内容,现在百度直接采集是会出验证的因为在浏览器页面有cookie和JS验证

所以必须自架设反向浏览器输出数据

$timeout = 30;

$proxy_url ="http://127.0.0.1:2021/baidu?".urldecode(搜索内容);

$proxy_ch = curl_init();

// 获取代理ip请求地址

curl_setopt ($proxy_ch, CURLOPT_URL, $proxy_url);

// 原样输出

curl_setopt ($proxy_ch, CURLOPT_RETURNTRANSFER, 1);

// 超时时间

curl_setopt ($proxy_ch, CURLOPT_CONNECTTIMEOUT, $timeout);

// 使用http代理模式

curl_setopt($proxy_ch, CURLOPT_PROXYTYPE, CURLPROXY_HTTP);

// 抓取并返回数据

curl_setopt($proxy_ch, CURLOPT_SSL_VERIFYPEER, false); //不验证证书下同

curl_setopt($proxy_ch, CURLOPT_SSL_VERIFYHOST, false); 

$neirong= curl_exec($proxy_ch);

echo $neirong;

评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

默默qidian

您的鼓励是我最大的动力,感谢!

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值