用Fiddler调试本机的时候发现 不补获本机 127.0.0.1 和 localhost,解决方法：在hosts文件中添加 127.0.0.1  local欺骗IE,然后用local 登录,结果OK,正常捕获

小乌的博客

<br />Google有两种网络爬虫，主爬虫和新爬虫。主爬虫主要负责发现新的网页。一个网页在新索引建立之后，马上会被主爬虫发现。如果一个网页建立索引需要经过一个月的时间，这个网页就会失效。<br /><br />新索引的建立还需要考虑其他非询问式的决定因素。这些决定因素关系着网页排名的高低。为了充分利用这些网页，而不是浪费时间等着下一次索引算法的更新，Google必须采取一些简单的措施来猜测排名，猜测访客难以利用的新内容是什么。<br /><br />尽管Google在作猜测，但下列内容都是真实可信的：<

<br />66.249.65.*<br />66.249.68.*<br />66.249.71.*<br />203.208.60.*<br />222.73.247.*

<br />1. Google爬虫名称: Googlebot<br />2. 百度（Baidu）爬虫名称：Baiduspider<br />3. 雅虎（Yahoo）爬虫名称：Yahoo Slurp<br />4. 有道（Yodao）蜘蛛名称：YodaoBot<br />5. 搜狗（sogou）蜘蛛名称：sogou spider<br />6. MSN的蜘蛛名称(微软最新搜索引擎Bing蜘蛛名也是这个)：Msnbot

<br />109.86.48.*<br />111.121.26.*<br />111.167.0.*<br />111.167.4.*<br />111.192.174.*<br />114.241.191.*<br />114.244.48.*<br />114.244.53.*<br />114.244.58.*<br />114.244.60.*<br />114.246.141.*<br />114.249.229.*<br />114.249.43.*<br />115.45.64.*<br