自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

tom_fans的博客

大数据架构运维开发

  • 博客(2)
  • 收藏
  • 关注

原创 Apache atlas sqoop Hook无法显示的问题

上一篇完成了HIVE的元数据管理,atlas还能够支持SQOOP, HBASE, KAFKA, STORM的元数据,但是按照官方文档配置之后发现SQOOP的元数据并没有任何显示,也没有任何报错。SQOOP日志如图,最后一红圈就是问题所在:从上图可以看到,SQOOP HOOK是起作用了的,但是数据没见进atlas,也没有任何报错,百度,GOOGLE查询类似的信息,发现论坛只有几篇文章提到...

2019-01-03 23:01:42 2540 12

原创 Apache atlas集成CDH管理元数据

先简单说明一下元数据管理的重要性,做数仓的时候,自然就会有很多报表,当你有几百个报表,几千张表的时候,现在有个需求需要修改一个表,然后有人问你,修改这个表会影响哪些报表? 如果你仅仅凭借记忆是完全不可行的,必须要有一个平台来管理数据的数据。知道了元数据的意义,那么从技术角度要做到什么程度才算是一个好的元数据管理呢? 从我个人的认知,表的元数据必须做到字段级别,也就是说修改了一个字段,你查询元数...

2019-01-01 04:29:53 13810 37

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除