hadoop
文章平均质量分 58
绾君
这个作者很懒,什么都没留下…
展开
-
CDH spark 部署客户端报错-生成客户端配置报错deploy client configuration fail
CDH spark 部署客户端报错-生成客户端配置报错deploy client configuration fail遇到这样的问题其实非常多,每次spark的客户端配置总不能成功部署,总是仅完成3/4 个步骤,首个失败,上的客户端配置 (id=3) 已使用 1 退出,而预期值为 0在网上找了很久,看见有大神是这样做的。1.首先我们需要找到此处日志目录,并不是/opt/cm-5.5.0/l...原创 2018-12-07 16:12:26 · 4967 阅读 · 0 评论 -
CDH hive迁移测试
工作上有一个需求,要把整个hive 迁移到另一套环境上做一个测试。源环境的hdfs 没有做ha ,目标环境的hdfs 做了ha,完成工作后,整理过程为以下步骤:1、把hive 的文件从hdfs 取出到本地,并打包,方便传输hive 内表文件hadoop fs -copyToLocal /user/hive/warehouse /root/warehousehive 外表文件hadoop ...原创 2018-12-07 16:18:13 · 657 阅读 · 0 评论