- 博客(3)
- 收藏
- 关注
RSS订阅原创 ERROR: No server address listed in hbase:meta for region test1,,1517390330801.40ff7bbead5f57620c4ef2
ERROR: No server address listed in hbase:meta for region test1,,1517390330801.40ff7bbead5f57620c4ef2126403a109. containing row上面是HBASE查询表的一个错误。业务逻辑很简单，每天通过SQOOP抽取数据到HBASE，建立HIVE关联表，通过SPARK SQL关联查询，然
2018-01-31 18:01:59
7128
3
原创 HBASE同步数据到SOLR
HBase Indexer, 又名key value store indexer, 解析HBASE的日志，生成SOLR语法并插入，简单理解就是HBASE的数据同步到SOLR。为什么会有这个东西的存在？ HBASE不支持事务，也就意味着不支持二级索引，但是在实际的工作当中会发现二级索引的使用非常重要，查询如果光从rowkey来考虑设计，很难，或者说做不到，因此二级索引的组件就产生了。有一个项目，我们
2018-01-19 10:52:45
3556
原创 Spark处理时间序列数据
整个逻辑为： 设备端毫秒级生成数据以文本方式传输到HDFS，然后通过SPARK解析文件并存储到HBASE中。问题1：SPARK本身为分布式，如果通过分布式解析文件并存储，如何保证数据系列顺序？问题2：使用SPARK进行HBASE插入的时候，使用RddPartitionForeach，然后给每条记录生成时间戳，并插入到HBASE，发现即使是微妙级别，在foreach的时候仍然会出现时间相同的
2018-01-15 17:45:51
5069
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人