Griffin
文章平均质量分 89
你个佬六
程序员各个都是佬六!!
展开
-
数据质量监控Griffin——打包方式安装部署
一、安装部署依赖准备JDK(1.8 或更高版本)MySQL(5.6及以上版本)Hadoop(2.6.0 或更高版本)Hive(版本 2.x)Spark(版本 2.2.1)Livy(livy-0.5.0-incubating)ElasticSearch(5.0 或更高版本)二、安装1、MySQL:在MySQL中创建数据库quartz,然后执行Init_quartz_mysql_innodb.sql脚本初始化表信息:2、Hadoop和Hive:从 Had原创 2021-07-07 14:41:10 · 624 阅读 · 0 评论 -
数据质量监控Griffin——使用
一、环境生产环境数据质量监控griffin:地址:http://XXXXXXXXX:4200/#/health账号:admin密码:123456二、Griffin是干什么的?官方介绍大数据模块是大数据平台中数据方案的一个功能组件,Griffin(以下简称Griffin)是一个开源的大数据数据解决质量模式,它支持所有数据和流数据方式检测质量模式,可以从不同维度(不同标准执行完毕后检查源端和目标端的数据数量是否一致、源表的数据空值数量等)收集数据资产,从而提高数据的准确度、可信度。在格里芬的架原创 2021-07-07 14:48:19 · 8118 阅读 · 0 评论 -
数据质量监控Griffin——docker部署
下载镜像docker pull apachegriffin/griffin_spark2:0.3.0docker pull apachegriffin/elasticsearch在喜欢的目录下创建docker的配置文件griffin-compose-batch.ymlgriffin: image: apachegriffin/griffin_spark2:0.3.0 # 下载的镜像名称 hostname: griffin # 设置的docker主机名 links: - es #原创 2021-07-07 14:32:01 · 6404 阅读 · 2 评论