如何使用Screaming Frog SEO Spider集成YiLu Proxy？

Screaming Frog SEO Spider 是一个抓取网站数据和分析网站 SEO 问题的工具。 它提供免费试用版，允许您抓取 500 个 URL。 本文介绍了如何在 Windows PC 上使用 Screaming Frog SEO Spider 和 YiLu Proxy。

在 https://www.screamingfrog.co.uk/seo-spider 下载 Screaming Frog SEO Spider 工具。

目录

1.点击配置-系统-代理

2.设置代理

3.输入要抓取的网址

4.输入代理IP用户名和密码进行验证

5.开始爬取

6.导出数据

7.打开文件

---

1.点击配置-系统-代理

2.设置代理

复制一个YiLuProxy动态IP信息
A.选择轮换住宅IP或数据中心IP
B.根据需要选择“Change IP per request”
C.点击“刷新(HTTP/Socks5)”按钮
D.右键点击一个IP，点击“复制IP和端口”或者直接复制IP地址和端口。

选择“使用代理服务器”。
在 Screaming Frog SEO Spider 代理配置中粘贴代理 IP 地址和端口。
单击“确定并重新启动”使更改生效。

3.输入要抓取的网址

单击“开始”。

 

然后会出现一个弹出窗口。

4.输入代理IP用户名和密码进行验证

5.开始爬取

右上角可以看到抓取过程，随时可以点击“暂停”。
下面是一些已经被抓取的网页。

6.导出数据

这里我导出网页的标题。
单击页面标题 - 导出。

然后输入名称，选择文件类型和保存目录（桌面）。
单击“保存”。

7.打开文件

然后你可以看到文件出现在电脑桌面上。
双击打开它。

 

 这是这些被抓取的网页的标题。