Mac/Win修改浏览器user agent,游客访问

本文介绍了如何修改浏览器的User Agent以伪装成搜索引擎爬虫,从而绕过某些网站对未登录用户的访问限制。在Chrome中,可以通过开发者工具临时更改User Agent;而在Mac或Windows上,可以使用命令行实现全局修改,以实现长期伪装。具体步骤包括在Chrome的开发者选项中选择Network条件,设置User Agent为Googlebot,以及在Mac的Terminal中输入命令行来切换不同设备的User Agent。
摘要由CSDN通过智能技术生成

起因:

看到这样一条微博,

有些网站禁止未登陆用户访问,但会对搜索引擎开绿灯。开绿灯的方式有可能只是简单地判断 User Agent。
所以,只要把浏览器的 User Agent 改为搜索引擎的爬虫即可访问其内容。对 Chrome 来说就是按 F12,点下面那三个点,在菜单中选 Network conditions,然后将 User Agent 设置为 Googlebot 即可。 ​​​​ via @tombkeeper

另外,博主在评论出指出,

F12 这招只对当前标签页有效,适合临时查个资料看一下。对某些需要长时间沉浸式体验的网站,可以直接在命令行上修改全局 User Agent:chrome.exe --user-agent=“Mozilla/5.0 (compatible; Googlebot/2.1)”

正文:

也许是很多人的困惑。作为计算机菜鸡,刚用mac时就有一个疑惑,浏览器(或搜索引擎)是如何知道我的设备从而给出不同的界面(或搜索结果)。一个更直接的例子,用手机和电脑打开同一个网址会跳转到不同的页面(即手机端会跳到移动版)。今天彻底解决了困扰多年的疑惑,上面这条微博堪称老中医了,故这篇文章也是基于此发散开来。

在浏览器中有一个选项叫user agent,即用户代理,默认情况下会根据设备自动选择。
按command+option+i进入开发者模式-Network conditions,拉到最下面可以看到。<

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值