- 博客(7)
- 收藏
- 关注
RSS订阅转载 ES以及ES插件的安装
http://www.elastic.co/guide/en/elasticsearch/reference/current/setup-configuration.html https://github.com/elastic/elasticsearch【在多台机器上执行下面的命令】es启动时需要使用非root用户，所有创建一个xiaoniu用户：useradd xiaoniu为hadoop用户
2017-09-06 18:12:01
1396
原创 Kafka消费者JavaAPI Kafka生产者JavaAPI
package cn.edu360.kafka;import java.util.HashMap; import java.util.List; import java.util.Map; import java.util.Properties;import kafka.consumer.Consumer; import kafka.consumer.ConsumerConfig; imp
2017-09-04 20:28:41
698
转载 kafka安装及命令
1.安装zk集群2.config/server.properties修改broker.id(唯一的)：broker.id=1修改kafka绑定的网卡host.name=node-1.xiaoniu.com修改kafka数据存放目录：log.dirs=/bigdata/kafka_2.11-0.8.2.2/data修改zk地址:zookeeper.connect=
2017-08-28 21:41:12
254
原创 spark中将topN条写到本地文件中
//求出url的topN// 先排好序，排好序后在取val sorted = urlCount.sortBy(x=>x,false)//我就想将前三条写入文件中/* var sum=0val top3 = sorted.map(x => { if (sum > 3) // *******Return statements aren't allowed in Spark closure
2017-08-25 18:06:49
1682
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人