- 博客(2)
- 收藏
- 关注
RSS订阅原创 kafka、hive、flume环境搭建
环境为 ubuntu 16.04，ip：192.168.1.100，单机模式0x00.JAVA环境搭建0x01.kafka环境搭建1. zookeeper启动：./zkServer.sh start-foreground2. kafka为了使kafka能够通过ip访问，需要修改`conf/server.properties`文件：advertised.lis...
2019-03-07 16:16:27
491
原创 使用Flume将Kafka中的数据导入Hive
0x01 需求背景将Kafka中的JSON数据持久化存储到Hive表中，以供后期有查找的需求。（看了很多讲解的博文，出了各种bug！饶了很多弯路！总结出来的经验就是一定要仔细看Flume的官方文档！！！！！！）Kafka中的数据示例：>{"id":1,"name":"snowty","age":25}Hive表示例：hive> desc hivetable...
2019-03-07 16:08:41
4597
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人