YouShootMeDown-CSDN博客

原创关于hdfs-site.xml的dfs.replication属性

1.dfs.replication属性的一些概念dfs.replication是个client参数，即node level参数，需要在每台datanode上设置。默认为3个副本已经够用了，设置太多也没什么用。Hadoop的备份系数是指每个block在hadoop集群中有几份，系数越高，冗余性越好，占用存储也越多。备份系数在hdfs-site.xml中定义，默认值为如果你只有3个datano...

2019-08-29 10:20:58 10063 2

原创搭建Hadoop集群时有用的命令、文件等

Linux部分修改ONBOOT=yes以获取以太网卡 vi /etc/sysconfig/network-scripts/ifcfg-eth0修改主机名 vi /etc/sysconfig/network配置环境变量 vim /etc/profile 然后刷新 source /etc/profile重启网络服务 service network restart...

2019-08-29 10:17:46 207

原创 HBase配置

配置没有错误的情况下，查了网上，一般都是集群时间不同步的问题。

2019-08-29 10:16:42 545

原创 zookeeper安装配置

配置zookeeper1 每个节点新建目录 /home/zookeeper-3.4.6/data2 每个节点创建文件myid vim myid 分别键入1，2，3，4，53 复制zoo_sample.cfg为zoo.cfg cp zoo_sample.cfg zoo.cfg4 打开配置文件 vim ~/soft/zookeeper-3.4.6/conf/zoo.cfg5 修改相关配置...

2019-08-29 10:16:12 159

原创实体PC机安装CentOS 6

安装步骤0. 华硕电脑，开机后按F8，选择从U盘启动1. 默认选择第一项，回车2. 选择Chinese（simplified）3. 回车OK4. 选择us，回车OK5. 选择Hard drive6. 一般情况选择第一项，回车OK7. 鼠标点击下一步8. 选择第一项，基本存储设备，下一步9. 输入主机名10. 选择亚洲/上海11. 设置root用户密码...

2019-08-29 10:13:05 357 3

原创动态增加Hadoop节点

1.修改主机名vim /etc/sysconfig/network2.安装javayum install java-1.7.0-openjdk*3.关闭防火墙service iptables stop4.Master节点免密码登录新节点

2019-08-29 10:08:00 561

原创 Mac下安装多版本的JDK并任意切换

以下步骤演示同时安装JDK1.7、JDK1.8和JDK10三个版本的jdk，并进行随意切换，在Java开发中可以根据需要进行选择。下载安装包jdk1.7https://www.oracle.com/technetwork/java/javase/downloads/java-archive-downloads-javase7-521261.htmljdk1.8https://www.or...

2019-06-21 10:29:07 871