- 博客(7)
- 收藏
- 关注
RSS订阅原创 Linux上yum安装MySQL文档
务必：先安装库yum install ld-linux.so.2 务必：再安装库yum install gcc-c++ yum install libstdc++.i686 解决安装问题:yum clean all 确定本地没有mysql:rpm -qa | grep -i mysql rpm -e --nodeps mysql-libs-5.1....
2019-09-10 11:36:05
123
原创 Linux安装rz,vim,同步时间命令
安装rz:yum install -y lrzsz 安装vim:yum -y install vim* 同步时间:yum install ntpdate
2019-09-10 11:26:40
267
原创 配置linux网卡
vim /etc/sysconfig/network-scripts/ifcfg-eth0 DEVICE=eth0 TYPE=Ethernet ONBOOT=yes BOOTPROTO=static IPADDR=192.168.2.132 GATEWAY=192.168.2.1 NETMASK=255.255.255.0 DNS=192.168.2.1 查看一下配置文件/etc/resolv...
2019-09-10 11:25:51
143
原创 Hadoop的Shuffle机制和优化
1）Map方法之后Reduce方法之前这段处理过程叫Shuffle 2）Map方法之后，数据首先进入到分区方法，把数据标记好分区，然后把数据发送到环形缓冲区；环形缓冲区默认大小100m，环形缓冲区达到80%时，进行溢写；溢写前对数据进行排序，排序按照对key的索引进行字典顺序排序，排序的手段快排；溢写产生大量溢写文件，需要对溢写文件进行归并排序；对溢写的文件也可以进行Combiner操作，前提是...
2019-09-10 11:18:28
377
原创 Hadoop常用端口号
dfs.namenode.http-address:50070 dfs.datanode.http-address:50075 SecondaryNameNode辅助名称节点端口号：50090 dfs.datanode.address:50010 fs.defaultFS:8020 或者9000 yarn.resourcemanager.webapp.address:8088 历史服务...
2019-09-10 11:05:58
270
原创 Linux常用命令
序号 命令 命令解释 1 top 查看内存 2 df -h 查看磁盘存储情况 3 iotop 查看磁盘IO读写(yum install iotop安装） ...
2019-09-10 11:04:36
108
原创 启动和停止storm和zookeeper集群的shell脚本
准备： 1、免密码登录 ssh-keygen -t rsa ssh-copy-id hostname（前提：配置好了hosts文件） 2、在脚本同级目录创建 vim supervisor-hosts master slave01 start-all.sh #!/bin/bash . /etc/profile bin=/opt/soft/storm-0.9.7/bi
2018-01-09 21:04:51
647
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人