自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(15)
  • 收藏
  • 关注

原创 zookeeper填坑指南

最近新搭了环境,并且在用admin的管理员账号去搭建zk+kafka,由于非root权限,过程种出现了一些问题。记录如下:错误1Cannot open channel to 1 at election address /192.168.31.130:3888java.net.NoRouteToHostException: 没有到主机的路由 (Host unreachable)原因:防护墙没关,使用以下命令关闭systemctl stop firewalld.service错误2·java.

2020-10-16 15:29:25 612

原创 kylin-3.0.1 安装踩坑 基于hadoop3.1 + hbase2.0

下载https://mirror.bit.edu.cn/apache/kylin/apache-kylin-3.0.1/apache-kylin-3.0.1-bin-hadoop3.tar.gz上传至服务器并解压配置环境变量vim /etc/profile.d/kylin.shexport KYLIN_HOME=/usr/local/apache-kylin-3.0....

2020-05-07 19:44:27 1229

原创 phoenix-5.0.0 安装指南 基于hbase-2.2.4

基于 hbase-2.2.4下载http://phoenix.apache.org/download.html将 apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz 上传至服务器并解压tar -xvzf apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz进入【apache-phoenix-5.0.0-HBas...

2020-05-07 17:50:09 1606 5

原创 hbase报错 org.apache.hadoop.hbase.ClockOutOfSyncException:Reported time is too far out of sync with ma

有一个节点挂掉以后起不来,查看日志中报错信息如下:2020-05-07 17:15:05,262 INFO [regionserver/dockerapache-03:16020] regionserver.HRegionServer: STOPPED: Unhandled: org.apache.hadoop.hbase.ClockOutOfSyncException: Server doc...

2020-05-07 17:31:44 296

原创 Clickhouse rpm离线 集群安装

环境: centos7.5dockerapache-01dockerapache-02dockerapache-03由于服务器环境是离线的。需要采用离线安装。在线安装可以参考下列博客:https://blog.csdn.net/oppo62258801/article/details/1036018701.下载...

2020-05-07 11:32:52 1307 1

原创 快速排序笔记:原理及 java实现

1. 搬运一些概念稳定:如果a原本在b前面,而a=b,排序之后a仍然在b的前面。不稳定:如果a原本在b的前面,而a=b,排序之后 a 可能会出现在 b 的后面。时间复杂度:对排序数据的总的操作次数。反映当n变化时,操作次数呈现什么规律。空间复杂度:是指算法在计算机内执行时所需存储空间的度量,它也是数据规模n的函数。2.快速排序-快排快排的性能在所有排序算法里面是最好的,数据规模越...

2020-04-28 15:40:18 201

原创 Spark3.0.0 on yarn (基于hadoop3.2 ) 分布式安装 - 避坑指南

1 centos安装scala1.下载:https://downloads.lightbend.com/scala/2.11.12/scala-2.11.12.tgz2.解压至【/usr/local】 tar -xvzf scala-2.11.12.tgz3.配置环境变量vim /etc/profile#scalaexport SCALA_HOME=/usr/local/sca...

2020-04-26 17:37:04 1675

原创 hive3.1.2 分布式安装 (基于hadoo3.1.3+spark)

1.首先你需要先安装一个mysqlhttps://downloads.mysql.com/archives/community/hive需要采用MySQL数据库保存Hive元数据。因为Hive自带的derby存储元数据不能支持多个用户连接,实际上derby只能允许一个会话连接。2. 下载hive安装包https://mirror.bit.edu.cn/apache/hive/hive-3.......

2020-04-26 13:40:32 3048 3

原创 Mysql-8.0.18 安装教程

依赖的rpm下载libaio-0.3.109-13.el7.x86_64.rpmperl-Data-Dumper-2.145-3.el7.x86_64.rpmnumactl-2.0.9-7.el7.x86_64.rpmnumactl-devel-2.0.9-7.el7.x86_64.rpmnumactl-libs-2.0.9-7.el7.x86_64.rpmhttp://mirror....

2020-04-26 12:27:50 432

原创 Flink 1.10.0 分布式安装 scala2.11

10.28.3.11 dockerapache-01 #flink master10.28.3.12 dockerapache-0210.28.3.13 dockerapache-03下载安装包https://mirror.bit.edu.cn/apache/flink/flink-1.10.0/flink-1.10.0-bin-scala_2.11.tgz上传至服务器fl...

2020-04-24 15:48:42 955

原创 Hadoop 3.1.3分布式安装教程

10.0.0.11 dockerapache-01 #管理节点10.0.0.12 dockerapache-0210.0.0.13 dockerapache-031 集群机器配置hostnamevim /etc/hosts这里根据自己的情况配置,配置完成后,互相ping一下host名确认是不是配置成功ping DockerApache-022 java jdk配置下载好...

2020-04-24 10:12:39 1175

原创 Hbase安装报错:error: KeeperErrorCode = NoNode for /hbase/master;Master exiting;HMaster Aborted;

现象和问题:安装部署hbase2.2.4, master进程一起来就挂掉。hbase shell 中list命令报以下错误error: KeeperErrorCode = NoNode for /hbase/master查看master日志报错信息:2020-04-24 09:26:28,501 ERROR [master/dockerapache-02:16000:becomeAct...

2020-04-24 10:05:19 3005

原创 Hbase 2.1.4 分布式安装教程

首先的首先,hadoop安装zookeeper的安装hbase的安装https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/2.2.4/下载安装包,并上传到master节点上在master机器上进行以下操作:. 配置环境变量vim /etc/profile.d/hbase.shexport HBASE_HOME=/usr/local/hb...

2020-04-23 17:28:46 382

原创 Hbaseshell scan多种过滤操作

查询数据get ‘bjcjtest1_hdrive_2000’,"\x00\x80\x03\x8D\x96\xA9\xDCO\xB6"scan ‘tts_201905’,{STARTROW=>"\x00\x80\x0C\x9FD\xF1\x09|\x7F",STOPROW=>"\x00\x80\x0DJB\x03\xED\xAC\x0D\x00"}get多版本get ‘t1’,...

2020-04-16 15:00:54 1273

原创 cassandra数据迁移

cassandra集群之间表数据迁移1. copy to/copy from该方式适用于小数据量,当数据量一大这个过程会持续很久,并且文件也会很大2. sstableloader3. Snapshots4. token环遍历方式5. Sqoop6. ETL工具kettledataxReferences:https://blog.csdn.net/u012965373/arti...

2020-02-13 17:17:41 558

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除