YisouSpider 蜘蛛 ip列表

最新推荐文章于 2025-03-27 10:45:32 发布
最新推荐文章于 2025-03-27 10:45:32 发布
阅读量2k 收藏
点赞数
分类专栏： 站长相关
本人更多原创文章可以去https://www.10t.com.cn查看！！！
本文链接：https://blog.csdn.net/nxuu01/article/details/105737459
版权

106.11.152.100
106.11.152.102
106.11.152.112
106.11.152.180
106.11.152.180
106.11.152.180
106.11.152.180
106.11.152.180
106.11.152.180
106.11.152.184
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.238
106.11.152.41
106.11.152.52
106.11.152.52
106.11.152.60
106.11.152.74
106.11.152.74
106.11.153.121
106.11.153.42
106.11.153.49
106.11.153.68
106.11.153.85
106.11.153.89
106.11.154.106
106.11.154.111
106.11.154.112
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.239
106.11.154.33
106.11.154.33
106.11.154.45
106.11.154.52
106.11.154.76
106.11.154.83
106.11.154.83
106.11.155.166
106.11.155.169
106.11.155.169
106.11.155.169
106.11.155.169
106.11.155.169
106.11.155.169
106.11.155.169
106.11.155.169
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.238
106.11.155.33
106.11.155.44
106.11.155.74
106.11.155.75
106.11.155.77
106.11.155.77
106.11.155.91
106.11.156.100
106.11.156.101
106.11.156.109
106.11.156.114
106.11.156.154
106.11.156.155
106.11.156.158
106.11.156.162
106.11.156.165
106.11.156.165
106.11.156.165
106.11.156.165
106.11.156.165
106.11.156.165
106.11.156.165
106.11.156.165
106.11.156.165
106.11.156.50
106.11.156.94
106.11.157.104
106.11.157.158
106.11.157.174
106.11.157.174
106.11.157.174
106.11.157.174
106.11.157.174
106.11.157.174
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.231
106.11.157.36
106.11.157.45
106.11.157.46
106.11.157.46
106.11.157.46
106.11.157.49
106.11.157.56
106.11.157.59
106.11.157.73
106.11.157.83
106.11.157.83
106.11.157.85
106.11.157.91
106.11.157.98
106.11.158.106
106.11.158.141
106.11.158.171
106.11.158.171
106.11.158.171
106.11.158.171
106.11.158.171
106.11.158.171
106.11.158.171
106.11.158.174
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.254
106.11.158.34
106.11.158.38
106.11.158.43
106.11.158.45
106.11.158.59
106.11.158.74
106.11.158.90
106.11.159.104
106.11.159.115
106.11.159.187
106.11.159.187
106.11.159.187
106.11.159.187
106.11.159.187
106.11.159.187
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.233
106.11.159.38
106.11.159.40
106.11.159.41
106.11.159.42
106.11.159.47
106.11.159.58
106.11.159.61
106.11.159.77
106.11.159.80
106.11.159.98
114.119.160.173
114.119.160.173
114.119.164.195
114.119.164.198
114.119.164.198
114.119.165.72
114.119.165.72
114.119.166.134
114.119.166.134
114.119.166.134
114.119.166.14
114.119.166.14
114.119.166.14
114.119.166.14
114.119.166.170
114.119.166.170
42.156.136.106
42.156.136.112
42.156.136.117
42.156.136.119
42.156.136.125
42.156.136.13
42.156.136.14
42.156.136.21
42.156.136.22
42.156.136.24
42.156.136.30
42.156.136.32
42.156.136.32
42.156.136.37
42.156.136.38
42.156.136.4
42.156.136.43
42.156.136.44
42.156.136.47
42.156.136.55
42.156.136.56
42.156.136.60
42.156.136.7
42.156.136.71
42.156.136.72
42.156.136.77
42.156.136.81
42.156.136.83
42.156.136.98
42.156.136.98
42.156.137.104
42.156.137.105
42.156.137.107
42.156.137.107
42.156.137.108
42.156.137.110
42.156.137.111
42.156.137.112
42.156.137.112
42.156.137.119
42.156.137.13
42.156.137.13
42.156.137.20
42.156.137.29
42.156.137.31
42.156.137.53
42.156.137.53
42.156.137.56
42.156.137.60
42.156.137.81
42.156.137.95
42.156.137.97
42.156.137.98
42.156.138.123
42.156.138.14
42.156.138.23
42.156.138.3
42.156.138.40
42.156.138.41
42.156.138.41
42.156.138.44
42.156.138.51
42.156.138.52
42.156.138.55
42.156.138.62
42.156.138.62
42.156.138.76
42.156.138.77
42.156.138.81
42.156.138.83
42.156.139.102
42.156.139.106
42.156.139.107
42.156.139.11
42.156.139.113
42.156.139.117
42.156.139.117
42.156.139.120
42.156.139.122
42.156.139.123
42.156.139.15
42.156.139.16
42.156.139.3
42.156.139.30
42.156.139.42
42.156.139.50
42.156.139.51
42.156.139.60
42.156.139.73
42.156.139.83
42.156.139.83
42.156.254.101
42.156.254.114
42.156.254.115
42.156.254.14
42.156.254.22
42.156.254.36
42.156.254.50
42.156.254.52
42.156.254.72
42.156.254.78
42.156.254.87
42.156.254.94
42.156.254.95
42.156.254.99

禁止某些User Agent抓取网站
Bertram的博客
06-28 753
我们都知道网络上的爬虫非常多，有对网站收录有益的，比如百度蜘蛛（Baiduspider），也有不但不遵守robots规则对服务器造成压力，还不能为网站带来流量的无用爬虫，比如宜搜蜘蛛（YisouSpider），于是整理收集了网络上各种禁止垃圾蜘蛛爬站的方法，来防止自己的网站不被其他人爬取呢？通过Nginx, 我们可以拦截大部分爬虫。那么再增加一个反爬虫配额文件 一、Apache 通过修改.htaccess文件 二、Nginx 进入到nginx安装目录下的conf目录，将如下代码保存为 agent_deny.
YisouSpider是什么搜索引擎的蜘蛛分析
网站开发技术—flydians
08-04 3165
最近查询网站日志发现存在大量yisouspider的蜘蛛，那么这个蜘蛛是宜搜搜索还是一搜搜索呢？其实都不是。 2015-08-03 12:22:07 W3SVC299431462 203.88.167. GET /index.php/space-13.html - 80 - 42.156.139.20 YisouSpider 200 0 0 2015-08-03 12:22:07 W3SV
公布一批神马爬虫IP地址，真实采集数据
尚贤达谭工的博客
07-30 2773
3、判断标准：主要根据用户代理是否包含“YisouSpider”，具体IP没做核实。2、神马搜索主要是移动端，市场份额不大，据统计，每月能带来个把客户咨询。1、抓取网站频繁，对资源消耗较大，基本上要消耗50%以上的服务器资源；14）、150.158.18.237 （只采集到1个IP）2、数据采集时间段：2023年10月-2024年1月；1、这批神马爬虫IP来源于尚贤达。二、神马爬虫主要有3个用户代理。
网站SEO维护总结---屏蔽神马蜘蛛IP段（YisouSpider）
最新发布
2401_87982534的博客
03-27 454
YisouSpider，同时来100个左右IP采集，把服务器带宽和CPU全都用光了，每次都要把网站卡死了，才消停一会，过半个小时，又来了，简直就是太烦了，我在神马站长后台也去看了，根本没有提交robots的地方，也没有限制频率的功能，反正就是叫天天不应，叫地地不灵。我就把这些IP段整理出来，把暴力的IP全部屏蔽了，网站一下就就正常了。我又不能把YisouSpider全部屏蔽了，因为UC浏览器的流量还是有的，那怎么办呢？我就通过统计分析IP来源，哪些是温和的蜘蛛IP，哪些是暴力的恶意的IP。
YisouSpider 蜘蛛 ip段
勤劳的执着的运维农民工
04-24 1503
106.11.152.0/24 106.11.153.0/24 106.11.154.0/24 106.11.155.0/24 106.11.156.0/24 106.11.157.0/24 106.11.158.0/24 106.11.159.0/24 114.119.160.0/24 114.119.164.0/24 114.119.165.0/24 114.119.166.0/24 42.1...
yisouspider蜘蛛导致网站加载崩溃解决办法
zhazhaji的博客
03-07 1553
1. 进入nginx的日志目录 如 access.log2.运行下面的命令把spider的ip抓取输出到iplog.txt中 cat access.log | grep -i "YisouSpider" | awk '{print $1,","}' > iplog.txt3. 把iplog.txt格式成以下格式，多个ip请换行，封禁所有的关于蜘蛛的ip    deny 1.1.1.1;   ...
Apache 屏蔽YisouSpider(一搜蜘蛛\神马)的方法
wykun0808的专栏
06-12 3778
网站的robot已经拒绝了YisouSpider，访问记录还有大量的YisouSpider 访问记录，导致网站反应变慢甚至宕机 方法一：通过Deny from IP 的方法，拒绝指定IP的访问：例如： Deny from 192.168.1.2 Deny from 192.168.1.3方法二：通过 RewriteCond  和 RewriteRule 组合 RewriteEngine On
[原创]II7/IIS8屏蔽YisouSpider蜘蛛
weixin_30621919的博客
12-12 537
来源：http://www.0531s.com/content-46-1927014-1.html YisouSpider蜘蛛抓取网页能够导致CPU暴涨，影响其他蜘蛛和用户的访问，多次实验后，发现IIS自带的URL重写可以起到作用。首先选择需要进行屏蔽的网站，然后打开URL重写。打开入站规则打开添加规则，选择请求阻止点击确定，在新弹出的界面，访问阻止依据中选择用户代理表头在模式(用户代...
nginx防护规则，拦截非法字符，防止SQL注入、防XSS，nginx过滤url访问，屏蔽垃圾蜘蛛，WordPress安全代码篇
云博客_资源宝分享
02-18 3880
nginx防护规则，拦截非法字符，防止SQL注入、防XSS，nginx过滤url访问，屏蔽垃圾蜘蛛，WordPress安全代码篇
Nginx中配置过滤爬虫的User-Agent的简单方法
01-10
一看不得了，基本上都是被一个User Agent叫”YisouSpider”的东西给刷屏了，一看就不知道是哪的蜘蛛，太没节操了。 找到根目录配置区，增加User Agent过滤判断语句，发现叫”YisouSpider”的直接返回403 注1：如果...
网站遇到Bytespider爬虫该怎么办？
互联网观察员
07-19 8116
Bytespider是什么？遇到Bytespider要怎么处理？Bytespider爬虫有什么危害？
python分析服务器日志_Python分析网站日志数据教程
weixin_39624094的博客
12-17 295
人生苦短，我用Python，从入门到放弃，在到学会装X，这里是一份装X指南，教你如何用Python分析网站日志数据教程。在使用Python分析网站日志之前，请安装openpyxl模块。下面贴出分析网站日志的轮子：# -*- coding: utf-8 -*-from openpyxl import Workbookimport jsonimport reimport time# 日志格式，支持NG...
Nginx 日志中的各种爬虫汇总和屏蔽操作
xhx836161547的博客
03-13 3610
转载原作者的一篇有关nginx的流量记录
SEO：搜索引擎蜘蛛名称UA（user-agent）
一些平时在开发过程中遇到的常见问题，分享给大家
05-15 2439
最近网站在做统计功能，想着统计下蜘蛛爬行记录，看看都有哪些搜索引擎蜘蛛经常关顾，故而好进行相应的对策改变。都知道搜索引擎对一个网站很重要,是很多网站重要的流量来源。熟悉各大搜索引擎的蜘蛛就显得必要。
屏蔽国外垃圾无用蜘蛛，防止大量抓取导致网站崩溃浪费带宽
come521的专栏
09-21 3790
Sogou web spider是搜狗搜索的网页爬虫，其UA标识为“Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)”。从名字上看，神马搜索的发音类似于宜搜，但和专注小说搜索的“宜搜(http://easou.com/)”不是同一家公司。主要是将从网站日志中发现的一些异常抓取的蜘蛛屏蔽掉，我上面列举的是一些常见的对我们网站没啥用处的蜘蛛，将这些蜘蛛屏蔽掉就好了。
[方法篇](禁止YisouSpider|EasouSpider|EtaoSpider)搜索引擎蜘蛛给网站带来的危害，有效指引爬虫对应的措施...
weixin_34226706的博客
05-24 300
搜索引擎蜘蛛给网站带来的危害，有效指引爬虫对应的措施[方法篇](禁止YisouSpider|EasouSpider|EtaoSpider)上一遍文章《搜索引擎蜘蛛给网站带来的危害，有效指引爬虫对应的措施(最准确搜索引擎蜘蛛名称)》下一篇“如何更高效发现&屏蔽搜索引擎蜘蛛”实例篇。现在接着详细介绍该方法，包括如何发现蜘蛛，从网站的日志里统计蜘蛛，发现未知的蜘蛛。...
如何查询神马蜘蛛有没有来过【屏蔽神马蜘蛛方法】
chatgpt002的博客
07-11 1848
大概包含以下几类内容，操作系统、移动端与否、浏览器内核名字、浏览器名字、内核版本、浏览器版本。搜狗： Sogou web spider Sogou inst spider Sogou spider2 Sogou blog Sogou Orion spider Sogou News Spider。百度： Baiduspider Baiduspider-render Baiduspider-video Baiduspider-news Baiduspider-mobile。
YisouSipder导致的网站问题
weixin_34363171的博客
09-13 135
有一个客户反映自己的网站时不时的不能访问或者是打开很慢，重启服务器或者服务后能正常访问一段时间，之后又会出现问题。首先查看服务器的情况，这台服务器是nginx+phpfpm的架构，top查看服务器负载不高，打开nginx的debug日志，看到有很多YisouSipder的访问日志，初步筛选了一下30%的记录都是他的，加上其他的爬虫记录，真正的用户访问量很少，明显就被Y...
搜索引擎UA和对应的蜘蛛IP段,百度,搜狗,so,360搜索,神马
wangxingps的博客
11-02 5303
众所周知，搜索引擎蜘蛛/爬虫在网站SEO收录排名扮演者至关重要的角色，今天放放SEO就按照国内常用的搜索引擎顺序说说百度搜索引擎user agent和对应的蜘蛛IP段、搜狗UA和对应的蜘蛛IP段、360搜索UA和对应的蜘蛛IP段、神马UA和对应的蜘蛛IP段。 国内主流搜索引擎UA和对应的蜘蛛IP段 百度搜索引擎常用的5类蜘蛛 重点：百度内容抓取蜘蛛UA： 百度PC蜘蛛UA： Mozilla/5.0(compatible;Baiduspider/2.0;+http://www.baidu.com/search
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

勤劳的执着的运维农民工

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值