![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
bigData
caiw
这个作者很懒,什么都没留下…
展开
-
Caused by: java.lang.IllegalArgumentException: Cannot modify hive.aux.jars.path at runtime.
hive Cannot modify hive.aux.jars.path at runtime问题解决 Caused by: java.lang.IllegalArgumentException: Cannot modify hive.aux.jars.path at runtime. It is not in list of params that are allowed to be mo...原创 2019-12-02 14:45:11 · 1520 阅读 · 0 评论 -
spark-core 分析电影数据
spark-core 分析电影数据 数据下载地址 http://files.grouplens.org/datasets/movielens/ml-1m.zip 数据说明 users.dat UserID::Gender::Age:Occupation:Zip-code 用户号::性别:年龄:职业:邮政编码 movies.dat MovieID::Ti...原创 2018-09-06 18:05:59 · 651 阅读 · 0 评论 -
spark-core求共同好友
spark-core求共同好友 数据样式 A:B,C,D,F,E,O B:A,C,E,K C:F,A,D,I D:A,E,F,L E:B,C,D,M,L F:A,B,C,D,E,O,M G:A,C,D,E,F H:A,C,D,E,O I:A,O J:B,O K:A,C,D L:D,E,F M:E,F,G O:A,H,I,J 代码 第一遍聚合拿到每个好友拥有的所有用户。 第二遍...原创 2018-09-06 18:13:04 · 420 阅读 · 0 评论 -
filebeat + kafka + logstash + ES + Kibana 整合使用
filebeat + kafka + logstash + ES + Kibana 整合使用 环境准备 JDK 1.8 filebeat 6.4.1 kafka 0.10.2.0 logstash 6.4.1 elasticsearch 6.4.1 Kibana 6.4.1 kafka 创建topic kafka-topics --zookeeper 192.168.23.121,192....原创 2018-09-28 18:24:23 · 5010 阅读 · 1 评论