- 博客(7)
- 收藏
- 关注
RSS订阅原创 Java - Elasticsearch查询类型
查询类型queryType描述后台代码样例matchAllQuery全匹配QueryBuilder qb = matchAllQuery();matchQuery单个匹配QueryBuilder qb = matchQuery( "name",
2016-03-29 16:25:09
10617
2
原创 Java - Elasticsearch RestFul连接搜索查询
1. 启动elasticsearchsu - elasticsearchcd /appl/elasticsearch-2.1.1/bin/elasticsearch -d -p pid2. curl命令查看cluster、version：curl 'centos1:9200'查看index：curl 'centos1:9200/_cat/indices?v'查看1条
2016-03-29 13:46:09
5912
7
原创 Spark运行任务
1. 启动hadoopsh start-dfs.shsh start-yarn.sh2. 启动sparkcd /appl/spark-1.4.0/sbin/start-all.sh3. 准备数据hadoop fs -put /mk/test/kmeans_data.txt /test/4. 编写程序包Javaimport org.ap
2016-03-29 09:58:14
666
原创 hadoop运行任务
1、wordCountJava LibJava sourceimport java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.h
2016-03-22 18:20:06
1007
原创 hadoop常见问题处理
Q: hadoop fs -ls /log: FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for Block pool (Datanode Uuid unassigned) service to localhost/127.0.0.1:9000. Exiting. java.io
2016-03-22 17:42:20
916
原创 hive性能优化
数据倾斜数据倾斜是指，map /reduce程序执行时，reduce节点大部分执行完毕，但是有一个或者几个reduce节点运行很慢，导致整个程序的处理时间很长，这是因为某一个key的条数比其他key多很多（有时是百倍或者千倍之多），这条key所在的reduce节点所处理的数据量比其他节点就大很多，从而导致某几个节点迟迟运行不完。表现：任务进度长时间维持在99%（或100%），查看任务监控页
2016-03-21 15:56:06
1563
转载 Shiro简介
1.1 简介Apache Shiro是Java的一个安全框架。目前，使用Apache Shiro的人越来越多，因为它相当简单，对比Spring Security，可能没有Spring Security做的功能强大，但是在实际工作时可能并不需要那么复杂的东西，所以使用小而简单的Shiro就足够了。对于它俩到底哪个好，这个不必纠结，能更简单的解决项目问题就好了。本教程只介绍基本的Shiro使
2016-03-21 14:29:52
333
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人