大数据
文章平均质量分 50
xingshen100
这个作者很懒,什么都没留下…
展开
-
spark学习笔记之quick-start
https://spark.apache.org/docs/latest/quick-start.html,版本:spark-2.1.1-bin-hadoop2.7,我本地hadoop版本是2.7.3需要注意的地方1、网页中这一句,val textFile = sc.textFile("README.md")对于需要改写成:val textFile = sc.textF原创 2017-05-25 11:26:06 · 421 阅读 · 0 评论 -
java api 查询hbase
考虑到Java代码一般就是查询hbase存储的hadoop运算的结果数据,下面记录下查询的简单范例代码package com.lvmama.crm.web.controller.csVipManager;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfigurati原创 2017-05-22 21:13:39 · 4281 阅读 · 0 评论 -
java api 查询hbase
考虑到Java代码一般就是查询hbase存储的hadoop运算的结果数据,下面记录下查询的简单范例代码package com.lvmama.crm.web.controller.csVipManager;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration原创 2017-06-23 16:31:40 · 347 阅读 · 0 评论 -
sqoop import data from database to hbase遇到的若干问题
遇到的问题:一、从oracle数据库向hbase导入数据时报错,Connection reset解决:在import命令中加入-D mapred.child.java.opts="\-Djava.security.egd=/dev/urandom" 。参考:http://www.cnblogs.com/dalu610/p/6423820.html;https://stackove原创 2017-06-23 16:42:51 · 472 阅读 · 0 评论