bigData
caiw
这个作者很懒,什么都没留下…
展开
-
Caused by: java.lang.IllegalArgumentException: Cannot modify hive.aux.jars.path at runtime.
hive Cannot modify hive.aux.jars.path at runtime问题解决Caused by: java.lang.IllegalArgumentException: Cannot modify hive.aux.jars.path at runtime. It is not in list of params that are allowed to be mo...原创 2019-12-02 14:45:11 · 1487 阅读 · 0 评论 -
spark-core 分析电影数据
spark-core 分析电影数据数据下载地址http://files.grouplens.org/datasets/movielens/ml-1m.zip数据说明users.dat UserID::Gender::Age:Occupation:Zip-code 用户号::性别:年龄:职业:邮政编码movies.dat MovieID::Ti...原创 2018-09-06 18:05:59 · 645 阅读 · 0 评论 -
spark-core求共同好友
spark-core求共同好友数据样式A:B,C,D,F,E,OB:A,C,E,KC:F,A,D,ID:A,E,F,LE:B,C,D,M,LF:A,B,C,D,E,O,MG:A,C,D,E,FH:A,C,D,E,OI:A,OJ:B,OK:A,C,DL:D,E,FM:E,F,GO:A,H,I,J代码第一遍聚合拿到每个好友拥有的所有用户。第二遍...原创 2018-09-06 18:13:04 · 411 阅读 · 0 评论 -
filebeat + kafka + logstash + ES + Kibana 整合使用
filebeat + kafka + logstash + ES + Kibana 整合使用环境准备JDK 1.8filebeat 6.4.1kafka 0.10.2.0logstash 6.4.1elasticsearch 6.4.1Kibana 6.4.1kafka创建topickafka-topics --zookeeper 192.168.23.121,192....原创 2018-09-28 18:24:23 · 4988 阅读 · 1 评论