![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
xiaowei_582648206
hello world。
展开
-
在idea上实现git rebase操作
git小技巧1、git rebase —onto把某个分支的某一段commit记录rebase到基点分支上2、idea中git rebase的各参数的含义C分支:当前分支(必须是分支)A分支:基点(可以是分支,也可以是commit节点)B分支:起点 (可以是分支,也可以是commit节点, 如果是commit节点,就找到当前分支最新commit跟这个起点commit节点之间所有的节点,rebase到基点上, 这个起点必须在当前分支上,如果不在,那么这个起点就没有意义了,...原创 2020-08-11 17:52:39 · 34217 阅读 · 3 评论 -
logrotate命令之minsize、maxsize、size的理解
logrotate命令logratet命令,主要用来切割日志。logrotate -v -s ./logrotate-status /etc/logrotate.d/demo # -v 输出命令执行过程中的详细信息 -s 指定输出每次rotate时的state文件路径。/etc/logrotate.d/demo是指定每次rotate日志时所用的配置文件,内容如下:/root/hellear_test/demo.txt {hourlycompresscopytruncateno.原创 2020-07-16 19:11:01 · 9850 阅读 · 2 评论 -
Hadoop完全高可用集群启动顺序
总结一下:完全高可用的hadoop集群主要包含两部分,HDFS的高可用,Yarn的高可用HDFS高可用启动顺序主要分为以下几步:第一步、启动所有journalNode进程,用来存之后namenode的元数据 第二步、格式化主namenode,并启动主namenode进程 第三步、将主namenode上的元数据信息复制到从的namenode所在节点 第四步、在主namenode上格式化...原创 2019-01-28 15:32:15 · 9644 阅读 · 1 评论 -
使用ansible脚本搭建zookeeper集群和hadoop高可用集群
1、配置zookeeper# vi /etc/ansible/hosts[zk_servers]172.16.206.27 myid=1172.16.206.28 myid=2172.16.206.29 myid=3# vi vars/main.ymlserver1_hostname: hadoop27server2_hostname: hadoop28server3_hostn...原创 2019-01-28 15:40:38 · 981 阅读 · 1 评论 -
解决Cloudera-Manager搭建CDH集群时hue数据库连接失败问题(二)
这个问题最常见的现象就是如下:在查看${CM_HOME}/log/cloudera-scm-server/cloudera-scm-server.log日志文件时,给出如下错误:[21/Feb/2019 15:21:36 +0000] settings DEBUG DESKTOP_DB_TEST_NAME SET: /opt/cloudera/parcels/CDH-5....原创 2019-02-22 16:22:24 · 2392 阅读 · 0 评论 -
Git基础入门知识
Git的基础知识本博客主要参考了https://blog.csdn.net/qq_36150631/article/details/81038485,并加入了自己的一些理解。一、如何添加远程库与本地仓库关联现在的情景是:我们已经在本地创建了一个Git仓库后,又想在github创建一个Git仓库,并且希望这两个仓库进行远程同步,这样github的仓库可以作为备份,又可以其他人通过该仓库来...原创 2019-02-27 17:21:27 · 1112 阅读 · 1 评论 -
解决Cloudera-Manager搭建CDH集群时hue数据库连接失败问题
通过查看$CM_HOME/log/cloudera-cm-server/cloudera-cm-server.log,发现hue数据库连接失败主要是由于缺少一个libmysqlclient.so.20这个库文件Traceback (most recent call last): File "/opt/cloudera/parcels/CDH-5.13.0-1.cdh5.13.0.p...原创 2019-02-20 14:38:51 · 4076 阅读 · 1 评论