python爬取整个网站js css 图片_快速获取一个网站的所有资源,图片,html,css,js......扒站,仿站必备工具...

今天介绍一款软件,可以快速获取一个网站的所有资源,图片,html,css,js......

以获取某车官网为例 我来展示一下这个软件的功能.

输入网站地址和网站要保存的文件夹

如果网站名称后我们可以扫描一下网站, 以便我们更好的筛选资源,剔除不要的链接,添加爬取得链接

在这里也可以设置爬去的链接的深度和广度,相邻域名,

设置好了这些,就可以点击Copy按钮了

接下来就会看到完整的爬取过程,当前爬取的链接,爬取的结果

可以看到那些错误,那些跳过了,还有文件类型,页面的Title,文件大小.

再爬取的过程中 你可以再开启一个软件的窗口,进行另一个个爬取任务,

这个软件的其他菜单,这个工具还是很强大的,可以自定义正则表达式来过来url,资源,还可以把爬取任务保存起来,以便再次使用,

还可以设置代理,分析网站.

爬取完