- 博客(4)
- 资源 (6)
- 收藏
- 关注
转载 [HBase] bulk-load装载hdfs数据到hbase小结
bulk-load的作用是用mapreduce的方式将hdfs上的文件装载到hbase中,对于海量数据装载入hbase非常有用,参考http://hbase.apache.org/docs/r0.89.20100621/bulk-loads.html: hbase提供了现成的程序将hdfs上的文件导入hbase,即bulk-load方式。它包括两个步骤(也可以一次完成): 1 将文件包
2013-03-31 18:17:54 1990
转载 hbase表操作优化
Hbase表写入1、使用批量加载工具,具体看链接: Section 9.8, “Bulk Loading”。2、巨量数据插入空表或小表的时候,需要注意hbase的分表原理。只有当一个region的数据打过阈值的时候才会进行分表操作。这意味着你巨量数据将会同时写入同一个region直到表大到需要分割。比较好的做法是创建表的时候预先创建多个空的region。但是不要太多,太多同样会
2013-03-26 13:42:28 1139
转载 MapReduce处理HBase中的数据
MapReduce 中如何处理HBase中的数据?如何读取HBase数据给Map?如何将结果存储到HBase中?MapReduce 中如何处理HBase中的数据?如何读取HBase数据给Map?如何将结果存储到HBase中?Mapper类:包括一个内部类(Context)和四个方法(setup,map,cleanup,run); setup,cle
2013-03-26 13:29:38 1399
转载 在Struts2的Action中,得到当前应用的物理路径
ServletContext servletContext = (ServletContext)ActionContext.getContext().get(ServletActionContext.SERVLET_CONTEXT);String rootPath = servletContext.getRealPath("/");-----------------------------
2013-03-20 11:56:44 1871
wingide4.1及破解文件
2013-06-23
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人