Digger爬虫平台正式开源啦~
经过三个月的开发测试,Digger爬虫平台正式在Github开源啦~
Digger是什么?
Digger是用纯Golang开发的配置式分布式跨平台爬虫系统,支持使用Javascript编写插件来实现各种你想要达到的目标。Digger及相关组件能够以极低的资源开销运行在各种廉价服务器和开发板上,如树莓派。
Digger没有复杂的依赖,部署十分简单,支持Linux和Windows平台,目前支持的CPU架构有:amd64
, arm
, arm64
项目地址:https://github.com/hetianyi/digger
文档:https://docs.diggerit.me/
在线体验:https://demo.diggerit.me/
您可以在 Demo演示环境 快速体验功能。