利用蜘蛛盘问qushi链接

利用蜘蛛盘问qushi链接

　　qushi链接对付网站的危害黑白常大的，我们都知道，可以利用来对其举行屏蔽，但怎样找出这些链接成为我们很头疼的题目，而搜刮引擎蜘蛛会报告我们哪些是真正的qushi链接，当蜘蛛爬取到一个qushi链接网页的时间，会在IIS日记里返回一个404状态码，这个时间便是报告我们，这个网面是不行访问的，是一个qushi链接，以是我们只要检察IIS日记我们就知道搜刮引擎蜘蛛提示我们网站有哪些qushi链接，然后我们再用屏蔽失即可，如许就不会让qushi链接对我们的网站造成影响了。