- 博客(2)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 记一次Java调优案例分析
记一次Java调优案例分析 上周，一同学给我发来，他们那里的案例 一看就是新生代产生过多对象，肯定是批量或者循环操作导致的，导致新生代一直在进行回收导致。 如果是老生代出现这样的问题，大部分情况下是列表或者集合导致的。 因此我们在获取数据的时候，往list里面放数据不要放太多，像上篇hbase数据迁移的时候，一次性迁移大概在200行数据，而不是一次性读入到内存中，必定会导致...
2018-09-25 15:16:00
158
原创 一种HBase表数据迁移方法的优化
一种HBase表数据迁移方法的优化 1.背景调研： 目前存在的hbase数据迁移主要分如下几类： 根据上图，可以看出： 其实主要分为两种方式：(1)hadoop层：因为hbase底层是基于hdfs存储的，所以可以通过把hdfs上的数据拷贝的方式来实现，即：DistCp。 (2)hbase层：主要是基于hbase数据层的 CopyTable:需要scan全表数据，效率比较低下...
2018-09-07 18:47:00
157
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人