2016年09月_Eric-L90

11月 10月 09月 08月 06月 05月 04月 03月 02月 01月

转载 Solr高效利用：Solr实现SQL的查询与统计

1.如何高效使用Solr查询功能？2.单个字段分组统计如何实现？3.IN条件查询有几种方式？4.多个字段分组统计是否只支持count？Cloudera公司已经推出了基于Hadoop平台的查询统计分析工具Impala，只要熟悉SQL，就可以熟练地使用Impala来执行查询与分析的功能。不过Impala的SQL和关系数据库的SQL还是有一点微妙地不同的。下面，我们

2016-09-28 14:22:49 12110 1

原创 Spark2.0的Caused by: java.net.URISyntaxException: Relative path in absolute URI: file错误

在使用spark2.0的时候遇到如下错误：16/09/21 14:12:22 INFO SharedState: Warehouse path is 'file:E:\scalacode_v2\Spark2Pro/spark-warehouse'.Exception in thread "main" java.lang.IllegalArgumentException: java.net.

2016-09-21 14:17:18 4077

转载 Scala中()与{}的关系

Scala中()与{}的关系在Scala中有些时候()和{}是可以相互替换的，但是如果不弄清楚到底什么时候该用()，什么时候该用{}，什么时候二者可以相互替换，那么在写代码的时候难免为出错，并且自己还发现不了。这里有以下几个使用原则： curly braces form a block of code, which evaluates to the last line of code

2016-09-19 17:32:07 817

转载 Spark Streaming 'numRecords must not be negative'问题解决

转载自：http://blog.csdn.net/xueba207/article/details/51135423问题描述笔者使用Spark streaming读取Kakfa中的数据，做进一步处理，用到了KafkaUtil的createDirectStream()方法；该方法不会自动保存topic partition的offset到zk，需要在代码中编写提交逻辑，此处

2016-09-09 15:20:11 2507

转载 zookeeper的watcher相关

转载自：http://www.cnblogs.com/zhangchaoyang/articles/2536178.html杂记ZooKeeper的用途：distributed coordination;maintaining configuration information, naming, providing distributed synchronization, and

2016-09-01 16:47:08 1162