- 博客(2)
- 问答 (1)
- 收藏
- 关注
原创 Kafka的简单实际测试
1.进入kafka所在的目录cd /usr/local/kafkabin/zookeeper-server-start.sh config/zookeeper.properties命令执行后不会返回Shell命令输入状态,zookeeper就会按照默认的配置文件启动服务,不要关闭当前终端.启动新的终端2.cd /usr/local/kafkabin/kafka-server-start.sh config/server.propertieskafka服务端就启动了,不要关闭当前终端。启
2022-05-12 13:19:23
948
原创 Spark编写独立应用程序实现数据去重
题目要求对于两个输入文件A和B,编写Spark独立应用程序,对两个文件进行合并,并剔除其中重复的内容,得到一个新文件C。下面是输入文件和输出文件的一个样例,供参考。输入文件A的样例如下:20170101 x20170102 y20170103 x20170104 y20170105 z20170106 z输入文件B的样例如下:20170101 y20170102 y20170103 x20170104 z20170105 y根据输入的文件A和B合并
2022-04-20 09:43:33
3680
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人