HBase
文章平均质量分 86
HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase是一个分布式的、面向列的开源数据库,该技术来源于 Fay Chang 所撰写的Google论文。
日月星辰TEL
如果技术不用于分享,将黯然失色...
展开
-
win10安装HBase2.1.4
win10安装Hadoop3.0.0:https://blog.csdn.net/qq262593421/article/details/105927625win10搭建hive3.0.0:https://blog.csdn.net/qq262593421/article/details/104961689原创 2021-05-30 00:04:21 · 713 阅读 · 0 评论 -
Hadoop3.0、Hive2.3.2、HBase2.1集群重置
一、hadoop集群重置1、关闭hbase和hdfsstop-habse.shstop-all.sh2、关闭zookeeperzkServer.sh stop3、删除nn、dn、jn配置目录数据rm -rf /home/cluster/hadoop/data/nn/*rm -rf /home/cluster/hadoop/data/dn/*rm -rf /home/cluster/hadoop/data/jn/*4、删除hdfs和hbase的日志文件数据rm -原创 2021-04-18 23:37:03 · 1067 阅读 · 0 评论 -
大数据集群之HBASE2.1.0高可用安装配置
一、安装准备下载地址:http://archive.apache.org/dist/hbase/参考文档:http://hbase.apache.org/book.htmlssh免密登录:https://blog.csdn.net/qq262593421/article/details/105325593zookeeper安装:https://blog.csdn.net/qq262593421/article/details/106955485hadoop集群安装:https://blo原创 2020-06-25 20:41:51 · 1109 阅读 · 0 评论 -
shell脚本监控hadoop集群,实现集群组件宕机重启
#!/bin/bashecho '.......................................'QuorumPeerMain=$(jps | grep ' QuorumPeerMain')ZKFC=$(jps | grep ' DFSZKFailoverController')NameNode=$(jps | grep ' NameNode')DataNode=$(jps | grep ' DataNode')HMaster=$(jps | grep ' HMaster...原创 2020-06-07 17:47:41 · 1438 阅读 · 0 评论 -
spark向hbase写入数据报错:tried to access method com.google.common.base.Stopwatch.<init>()V from class...
问题描述spark向hbase写入数据时抛出的报错,实现代码转:https://blog.csdn.net/qq262593421/article/details/105969665"C:\Program Files\Java\jdk1.8.0_111\bin\java.exe" "-javaagent:D:\JetBrains\IntelliJ IDEA 2019.2.3\lib\idea_rt.jar=50701:D:\JetBrains\IntelliJ IDEA 2019.2.3\bin"原创 2020-05-12 17:19:52 · 3830 阅读 · 0 评论 -
spark操作hbase的两种方法
添加数据之前先 createtablecreate 'student','cmf1','cmf2','cmf3'1、RDD[(String,String)]类型添加package com.xtd.hbaseimport org.apache.hadoop.hbase.client.{Put, Result}import org.apache.hadoop.hbase....原创 2020-05-07 12:10:06 · 1738 阅读 · 0 评论 -
深入探讨HBase
HBASE基础1. HBase简介HBase是一个高可靠、高性能、面向列的,主要用于海量结构化和半结构化数据存储的分布式key-value存储系统。它基于Google Bigtable开源实现,但二者有明显的区别:Google Bigtable基于GFS存储,通过MAPREDUCE处理存储的数据,通过chubby处理协同服务;而HBase底层存储基于hdfs,可以利用MapReduce、...转载 2020-03-07 16:31:28 · 763 阅读 · 0 评论 -
HBase入门教程
一条数据的HBase之旅,简明HBase入门教程-开篇这是HBase入门系列的第1篇文章,介绍HBase的数据模型、适用场景、集群关键角色、建表流程以及所涉及的HBase基础概念,本文内容基于HBase 2.0 beta2版本。本文既适用于HBase新手,也适用于已有一定经验的HBase开发人员。一些常见的HBase新手问题什么样的数据适合用HBase来存储? 既然HBase...转载 2020-03-03 18:01:45 · 741 阅读 · 0 评论 -
HBase shell 命令
hbase命令行有12个分组,分别是general、dll、dml、tools、replication、snapshots、configuration、quotas、procedures、visibility、labels、regroupGroup name: generalprocesslist, status, table_help, version, whoami...原创 2020-03-03 16:25:26 · 683 阅读 · 0 评论