网络爬虫——常用39个User-Agent代理

最新推荐文章于 2024-09-29 09:45:28 发布

程序员小哲

最新推荐文章于 2024-09-29 09:45:28 发布

阅读量9.8k

点赞数 3

分类专栏：网络爬虫文章标签：网络 chrome firefox python hadoop

本文链接：https://blog.csdn.net/xiaozhezhe0470/article/details/104878914

版权

本文介绍了网络爬虫中常用的39个User-Agent，包括来自Chrome、Firefox等浏览器的代理，这些User-Agent可以用于伪装浏览器身份，避免被目标网站识别为爬虫。

摘要由CSDN通过智能技术生成

常用浏览器代理池（User-Agent）

uapools=[
    "NOKIA5700/ UCWEB7.0.2.37/28/999",
    "Mozilla/4.0 (compatible; MSIE 6.0; ) Opera/UCWEB7.0.2.37/28/999",
    "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/534.50 (KHTML, like Gecko) Version/5.1 Safari/534.50",
    "Opera/9.80 (Windows NT 6.1; U; zh-cn) Presto/2.9.168 Version/11.50",
    "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Win64; x64; Trident/5.0; .NET CLR 2.0.50727; SLCC2; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; InfoPath.3; .NET4.0C; Tablet PC 2.0; .NET4.0E)",
    "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; WOW64; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; .NET4.0C; InfoPath.3)",
    "Mozilla/5.0 (Windows; U; Windows NT 6.1; ) AppleWebKit/534.12 (KHTML, like Gecko) Maxthon/3.0 Safari/534.12",
    "Mozilla/4.0 (