因为以前用习惯了菜刀爬行网站,感觉一个个站看的话还是这个好用。但是竟然互联网上下不到了,只有码姐姐要收4元。
难找故分享一下。
爬行网站工具推荐:
1. 单个爬行的话:爬行菜刀就可以了(虚拟机用吧)
当然谷歌插件findsomething 更好用。还能爬取js里面的路径浏览显示
链接:https://share.weiyun.com/hOS6s91r 密码:85ugea
2. 批量爬行推荐:范世强的XmfSpider 1.4(这个的优点是可以限定抓取数量),还有一个推荐:WebRobot.exe
3. 批量爬行js推荐:URLFinder. exe