- 博客(12)
- 收藏
- 关注
RSS订阅原创 MySQL启动报错 Job for mysqld.service failed because the control process exited with error code. See “sys
Job for mysqld.service failed because the control process exited with error code. See “systemctl status mysqld.service” and “journalctl -xe” for details.查看 tail -n 300 /var/log/mysqld.log 日志发现查看磁盘空间发现是root下空间满了，磁盘挂载点不合理，重新挂载或清理根目录即可...
2021-10-16 09:46:08
554
原创 Host xxxx has an active database process on port = 40001 Script Exiting!
执行greenplum初始化命令gpinitsystem -c /usr/local/greenplum-db-5.21.0/docs/cli_help/gpconfigs/gpinitsystem_config -h /usr/local/greenplum-db-5.21.0/all_segment出现如下错误解决办法：rm -rf /tmp/.s.PGSQL.40001.lock #删除报错行上方出现的文件...
2021-09-30 17:06:35
669
1
原创 docker安装步骤
docker安装步骤# 1.卸载旧版本sudo yum remove docker docker-client docker-client-latest docker-common docker-latest \ docker-latest-logrotate docker-logrotate docker-engine # 2.安装yum-utilssudo yum install -y yum-utils # 3.设置阿里云镜像s
2021-09-23 16:16:15
128
原创 docker安装MySQL5.7
1. 前提条件# centos7 且内核版本高于3.10, 可通过以下命令查看内核版本uname -r 2. 利用yum安装docker# 安装一些必要工具yum install -y yum-utils device-mapper-persistent-data lvm2# 添加软件源信息yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo#更新yum
2021-09-23 15:28:48
228
原创 Host key verification failed错误处理
Host key verification failed在进行免密登录配置的时候，报Host key verification failed相关错误，具体情况如下：执行ssh-copy-id -i ~/.ssh/id_rsa.pub root@192.168.12.113执行ssh root@192.168.12.113时解决办法：不要在yes/no选项的时候回车，输入yes即可解决。...
2021-09-16 15:26:28
954
转载 Kafka基础架构
Producer ：消息生产者，就是向 kafka broker 发消息的客户端；Consumer ：消息消费者，向 kafka broker 取消息的客户端；Consumer Group （CG）：消费者组，由多个 consumer 组成。消费者组内每个消费者负责消费不同分区的数据，一个分区只能由一个组内消费者消费；消费者组之间互不影响。所有的消费者都属于某个消费者组，即消费者组是逻辑上的一个订阅者。Broker ：一台 kafka 服务器就是一个 broker。一个集群由多个 br..
2021-06-09 10:34:50
57
原创 Hbase的读写过程
HBase数据的写入过程：client访问zookeeper，从meta表中找到需要查找的table的startkey所在的region信息客户端访问region所在的RegionServer，RegionServer把数据分别写入 HLog 和 MemStoreMemStore达到一个阈值后则把数据刷写到磁盘StoreFile文件中。若MemStore中的数据有丢失，则可以从HLog上恢复当Store中StoreFile的数量超过阈值时，将若干小StoreFile合并（Compact）为一个大S
2021-06-09 09:38:55
66
转载 Hbase存储原理 - Region/Store/StoreFile/Hfile之间的关系
Region/Store/StoreFile/Hfile之间的关系1.Regiontable在行的方向上分隔为多个Region。Region是HBase中分布式存储和负载均衡的最小单元，即不同的region可以分别在不同的Region Server上，但同一个Region是不会拆分到多个server上。Region按大小分隔，表中每一行只能属于一个region。随着数据不断插入表，region不断增大，当region的某个列族达到一个阈值（默认256M）时就会分成两个新的region。2.Stor
2021-06-08 13:48:19
1936
原创 搭建数据仓库的意义及优点
1.搭建数据仓库的意义 数据仓库更多代表的是一种对数据的管理和使用的方式，它是一整套包括了etl、调度、建模在内的完整的理论体系。数据仓库在构建过程中通常都需要进行分层处理。业务不同，分层的技术处理手段也不同。 数据仓库的存储并不需要存储所有原始数据，因为比如你存储冗长的文本数据完全没必要，但需要存储细节数据，因为需求是多变的，而且数据仓库是导入数据必须经过整理和转换使它面向主题，因为...
2019-06-26 23:36:38
11945
原创 hadoop 的六个配置文件的作用
core-site.xml：核心配置文件，主要定义了我们的集群是分布式，还是本机运行hdfs-site.xml： 分布式文件系统的核心配置 决定了我们数据存放在哪个路径，数据的副本，数据的block块大小等等hadoop-env.sh : 配置我们jdk的home路径mapred-site.xml : 定义了我们关于mapreduce运行的一些参数yarn-site.xml : 定...
2018-11-11 23:41:29
1930
原创 Hadoop1.x与Hadoop2.x的区别
hadoop1.x的架构模型： hdfs部分：典型的主从架构，没有主备的概念 namenode：集群当中的主节点，主要用于维护集群当中的元数据信息，以及接受用户的请求，处理用户的请求 secondaryNamenode：主要是辅助namenode管理元数据信息的 datanode：集群当中的从节点，主要用于存储数据文件系统： 分盘 文件夹 文件...
2018-11-11 23:05:29
521
原创 centOS 6.9时钟同步配置
centos 6.9时钟同步设置1. 安装ntpdate工具 yum -y install ntp ntpdate2. 设置系统时间与网络时间同步 ntpdate cn.pool.ntp.org3. 将系统时间写入硬件时间 hwclock --systohc...
2018-11-09 23:00:06
759
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人