Gobblin简介

   

 Gobblin是LinkedIn公司开发的用于在Hadoop环境里统一数据抽取的框架。目前Gobblin可以建立多种pipelines，比如数据质量检查器、源数据管理、开发和其他操作。 

    Gobblin支持多种类型的数据源。例如数据库，Rest Api服务，FTP/SFTP，hdfs文件系统等，Gobblin对其中的数据抽取，转换和加载，包括任务调度，任务分片，错误处理，任务状态管理，数据质量检查，数据发布等。Gobblin对这些不同的数据源统一源数据管理。

   Gobblin是一款集可用性，容错性，质量保证，可扩展性，处理数据模型变化的简单易用的数据抽取工具。