- 博客(6)
- 收藏
- 关注
原创 Docker 快速上手
Docker 常用命令总结Docker 安装:uname -r 检查 Linux的Kernel版本 必须 > 3.8卸载之前的安装如果有:yum remove docker docker-client docker-client-latest docker-common docker-latest docker-latest-logrotate docker-logrotate docker-engine安装驱动及工具:yum install -y yum-utils device-ma
2021-05-09 23:45:05 215
原创 CDH安装agent 过程中 Thread agent ERROR Heartbeating to 192.168.88.161:7182 failed的出错问题
如图:参考网上解决方案:https://www.136.la/shida/show-38853.html删除/var/lib/cloudera-scm-agent/uuid重启:systemctl restart cloudera-scm-aget 得到解决。
2021-05-08 10:00:18 1470 7
转载 ssh找不到环境变量中的命令
ssh 找不到环境变量中的命令在使用 ssh node1 “命令” 时找不到相关命令由于本地环境变量存放在 /etc/profile 中原因:要解决SSH远程执行命令时找不到自定义环境变量的问题,那么可以在登录用户的HOME目录的.bashrc中添加需要的环境变量**结论:**将 etc/profile 中的环境变量迁移到 ~/.bashrc 文件中...
2021-04-18 09:32:03 170
原创 HDFS,Hbase和 kudu 简单区别总结
HDFS使用列式存储格式Apache Parquet,Apache ORC,适合离线分析,不支持单条纪录级别的update操作,随机读写性能差(一次写入,多次读取)Hbase可以进行高效随机读写,却并不适用于基于SQL的数据分析方向,大批量数据获取时的性能较差KuduKUDU较好的解决了HDFS与HBASE的这些缺点,它不及HDFS批处理快,也不及HBase 随机读写能力强,但是反过来它比HBase批处理快(适用于OLAP的分析场景),而且比HDFS随机读写能力强(适用于实时写入或者更新的场景),
2021-03-30 12:52:13 1398
原创 大数据常用端口总结
---------zookeeper----------1、2181:对cline端提供服务2、3888:选举leader使用3、2888:集群内机器通讯使用(Leader监听此端口)-------------hadoop----------------50090:SecondaryNameNode 端口50070:NameNode 主节点 webUI 端口8020/9000: namenode active状态下的端口号10020: MapReduce 历史任务端口19888:MapR
2021-03-23 12:55:10 769 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人