- 博客(13)
- 收藏
- 关注
RSS订阅原创 Hbase导入导出数据（百万级条数据）步骤
导出通过Export导出数据到目标集群的hdfs，再在目标集群执行import导入数据，Export支持指定开始时间和结束时间，因此可以做增量备份，Export工具参数如下：可见，在导出时可以指定version，starttime，endtime等参数，并且可以通过-D指定是否压缩，指定caching等属性。Export导出工具与CopyTable一样是依赖hbase的scan读取数据，并且...
2019-08-29 14:36:34
2841
原创 hbase导入导出时错误 Call From zhl/192.168.137.13 to zhl:8032 failed on connection exception: java.net.Conne
日志文件：Exception in thread “main” java.net.ConnectException: Call From zhl/192.168.137.13 to zhl:8032 failed on connection exception: java.net.ConnectException: 拒绝连接; For more details see: http://wiki....
2019-08-29 14:07:56
1286
原创 ResourceManager启动报resourcemanager running as process 10114. Stop it first.
前面启动ResourceManager的时候从来没出现这样的问题，今天一启动发现，无论如何ResourceManager都启动不起来接着我查看日志文件，发现并没有错误日志信息因为今天是8月29日了，上面显示最新的信息是8月23日的，很奇怪。启动不了也应该日志信息里面也应该有原因啊。后面还是继续查看了下jps，发现还是没有ResourceManager这个节点。然后我的解决办法是先把...
2019-08-29 13:56:49
7138
原创 用Hbase API写数据卡死Established session 0x16cb850dd61000e with negotiated timeout 40000 for client /192.1
自己尝试了很多种方法：1，修改配置文件（修改到我自己都不知道是个什么鬼了）2，重新搭建Hbase（尝试了，还是没用）…3，最后，最重要的来了，格式化了NameNode。这个就直接暴力了。我是尝试了各种方法，最后格式化了之后，才写进去了数据。...
2019-08-23 15:30:40
6134
2
转载 创建表，出现ERROR: Table already exists: （表名）student!
原文引用自https://blog.csdn.net/qq_38025219/article/details/96828950。原因是以前创建过这个表，但是hbase暴力删除了这个表后，zookeeper还保留了这个表的信息。在linux 下用hbase zkcli 命令进入ls /hbase/table 可以查看存在的表信息然后用命令rmr /hbase/table/表名进入hb...
2019-08-23 15:13:27
25857
1
原创 Hmaster启动老是挂掉。master.HMaster: Failed to become active master
2019-08-22 18:00:01,555 FATAL [zhl:16000.activeMasterManager] master.HMaster: Failed to become active masterjava.net.ConnectException: Call From zhl/192.168.137.13 to zhl:9000 failed on connection ex...
2019-08-22 11:00:17
2536
1
原创 Hbase一些简单表操作（本地模式）
一，进入hbase文件目录下二，进入hbase的shell命令行三，执行表命令1．创建表hbase(main):002:0> create ‘student’,‘info’2．插入数据到表hbase(main):003:0> put ‘student’,‘1001’,‘info:sex’,‘male’hbase(main):004:0> put ‘student’...
2019-08-14 13:17:05
303
原创 关闭Hbase出现stoping hbase...........
博主是什么时候出现这个问题的呢，是在执行这条语句的时候：bin/stop-hbase.sh出现这个问题的时候，是因为你的Hbase有问题，例如：什么东西没卸载干净，或者是把一些重要的文件卸载掉了，这个时候你就需要中断这个命令ctrl+v中断命令。中断之后，选择强制关闭hmaster执行下面这条语句即可：...
2019-08-14 11:38:42
1522
原创 本地模式下搭建Hbase（使用自带的zookeeper）
HBase是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于一般的关系...
2019-08-13 16:11:46
6146
2
原创 删除eppshell64.dll这个文件的方法
博主是下载了EditPlus这个软件，然后卸载它的时候，发现eppshell64.dll卸载不掉。删除eppshell64.dll这个文件的时候说进程正在运行。方法：输入点击开始/运行，输入regedit，进入注册表。然后Ctrl+F，在里面输入eppshell64.dll，然后找到了就删除即可。...
2019-08-06 14:59:40
13369
原创 Hadoop官方经典案例Wordcount解析和学习--本地模式（Hadoop学习2）
Wordcount是什么？Wordcount简单来说就是单词统计，把一个文件内的单词进行统计一遍，这个经典的案例呢，会伴随我们学习hadoop一直到最后。这个统计无疑是很重要的。工具准备：linux系统搭建好的Hadoop环境案例演示步骤（1）创建文件夹 wciput（当然，首先你得在/opt/module/hadoop-2.7.2，这个路径下面，这个是博主自己创建得路径，不同情况...
2019-08-06 13:42:46
280
原创 Hadoop官方案例Grep解析--本地模式（Hadoop学习 1）
Hadoop官方案例Grep解析和学习这是我第一次写博客，如果有写的不好的地方，希望各位多担待，并且可以指出我的错误所在。Grep是什么东西呢？grep （缩写来自Globally search a Regular Expression and Print）是一种强大的文本搜索工具，它能使用特定模式匹配（包括正则表达式）搜索文本。这是我从百度百科上面复制来的，从这上面可以看出来Grep是一...
2019-08-06 10:48:20
1304
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人