Pholcus(幽灵蛛)是一款纯Go语言编写的重量级爬虫软件,清新的GUI界面,优雅的爬虫规则、可控的高并发、任意的批量任务、多种输出方式、大量Demo,支持横纵向两种抓取模式,支持模拟登录和任务取消等,并且考虑了支持分布式布局。
框架模块
![09bc63d2c55a99b78c9d7761fffff9067ca39ed3](https://i-blog.csdnimg.cn/blog_migrate/c10934b29dcd49193df7d0d2af5e201b.png)
文章转载自 开源中国社区 [http://www.oschina.net]
Pholcus(幽灵蛛)是一款纯Go语言编写的重量级爬虫软件,清新的GUI界面,优雅的爬虫规则、可控的高并发、任意的批量任务、多种输出方式、大量Demo,支持横纵向两种抓取模式,支持模拟登录和任务取消等,并且考虑了支持分布式布局。
框架模块
文章转载自 开源中国社区 [http://www.oschina.net]