作者丨Kevin
来源丨手机黑客
不少的网站(其实主要是那种1024类,当然也有一些小众专业类)是禁止未登陆用户访问的。但它会对搜索引擎开绿灯,为什么呢?
因为由搜索引擎带来的SEO关键词流量是非常可观的,当你找到这样的网站,不得不用它时,只能按照网站的要求注册账号甚至交一定的会员费。
言归正传,今天介绍的一项黑科技、骚操作就是使用浏览器自带的功能,用身份欺骗绕过网站的访问权限限制,进而直接访问网站内容。
简单来说就是网站禁止你未登陆用户访问,你用这项黑科技来破解它。
核心操作就是把浏览器的User Agent设置为搜索引擎的爬虫即可访问网站内容。
具体的操作方法也很简单:
Step1:开启浏览器的调试模式
比如Chrome浏览器,按F12即可开启调试模式,目前流行的浏览器如QQ浏览器、360浏览器,默认都是通过F12开启
Step2:打开NetWork conditions
具体如下图所示,先点开调试界面中的那三个点,然后选择菜单中的More tools,再选择弹出菜单的NetWork conditions
Step3:设置NetWork conditions
在NetWork conditions界面中,首先选中Caching选项的勾,Network throtting 选择下拉菜单中的Online,在User agent中去除Select automatically 的选择,最后在下拉菜单中选择Googlebot
以上配置完,浏览器当前标签页的访问就能欺骗你要访问网站,被当作google的爬虫来特殊对待,对你彻底的开放数据。
如果对某些特殊类网站需要长时间沉浸式的体验,还可以在命令行中的修改全局配置,比如chrome浏览器,就使用:
UserAgent:chrome.exe--user-agent="Mozilla/5.0(compatible;Googlebot/2.1)"
推荐↓↓↓
长
按
关
注
?【16个技术公众号】都在这里!
涵盖:程序员大咖、源码共读、程序员共读、数据结构与算法、黑客技术和网络安全、大数据科技、编程前端、Java、Python、Web编程开发、Android、iOS开发、Linux、数据库研发、幽默程序员等。
万水千山总是情,点个 “
在看” 行不行