- 博客(2)
- 收藏
- 关注
原创 Apache atlas sqoop Hook无法显示的问题
上一篇完成了HIVE的元数据管理,atlas还能够支持SQOOP, HBASE, KAFKA, STORM的元数据,但是按照官方文档配置之后发现SQOOP的元数据并没有任何显示,也没有任何报错。SQOOP日志如图,最后一红圈就是问题所在:从上图可以看到,SQOOP HOOK是起作用了的,但是数据没见进atlas,也没有任何报错,百度,GOOGLE查询类似的信息,发现论坛只有几篇文章提到...
2019-01-03 23:01:42 2540 12
原创 Apache atlas集成CDH管理元数据
先简单说明一下元数据管理的重要性,做数仓的时候,自然就会有很多报表,当你有几百个报表,几千张表的时候,现在有个需求需要修改一个表,然后有人问你,修改这个表会影响哪些报表? 如果你仅仅凭借记忆是完全不可行的,必须要有一个平台来管理数据的数据。知道了元数据的意义,那么从技术角度要做到什么程度才算是一个好的元数据管理呢? 从我个人的认知,表的元数据必须做到字段级别,也就是说修改了一个字段,你查询元数...
2019-01-01 04:29:53 13810 37
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人