BigData
文章平均质量分 74
指剑
亚马逊云科技Ambassador|亚马逊云科技开发者社区开发工具Community Builder | 亚马逊云科技重庆User Group Leader
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Linux安装Hbase并验证
一、Master节点创建hbase文件夹,并解压tar包 2、Master节点添加环境变量并生效配置 3、Master节点编辑配置文件 4、master节点拷贝文件到 hdfs 5、mater节点分发到其他节点 6、master节点启动hadoop集群 7、启动zookeeper 8、启动hbase 9、jps查看进程 10、启动hbase shell 11、关闭并退出 Master节点创建hb...原创 2020-04-23 09:46:35 · 1069 阅读 · 0 评论 -
Linux安装zookeeper并验证
一、创建 /usr/zookeeper 文件夹 二、解压缩 zookeeper-3.4.10.tar.gz 三、备份zoo.cfg文件 四、编辑zoo.cfg文件修改 五、编辑环境变量并生效 六、启动 zookeeper 服务,查询 zookeeper 状态 七、关闭 zookeeper 服务。 八、重启 zookeeper 服务 九、jps查看进程 1、创建 /usr/zookeeper 文件...原创 2020-04-23 09:43:15 · 1743 阅读 · 1 评论 -
Linux安装Hive并测试
Node2节点配置 Master节点配置 Node1节点配置 启动Hive并测试 一、Node2节点配置 Node2节点执行: 1、安装mysqld/mariadb服务(建议使用离线源) [root@node2 ~]# yum -y install mariadb-server 2、启动mysql服务,并设置开机自启 [root@node2 ~]# systemctl start mariadb...原创 2020-04-23 09:42:32 · 1033 阅读 · 1 评论 -
在Hadoop系统中运行WordCount案例失败解决方法
报错提示: mapreduce.shuffle set in yarn.nodemanager.aux-services is invalid 请在yarn-site.xml中添加 <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuff...原创 2020-03-16 16:18:00 · 2587 阅读 · 0 评论 -
Hadoop3.0基础平台搭建(三节点),以及案例运行并使用python生成词云
1、设备配置列表 2、主机名映射 3、生成密钥 4、将密钥发送到各个节点 5、注意事项及验证 6、关闭防火墙和SeLinux安全模块(所有主机均需操作 7、解压JDK包,设置Java环境变量(所有主机均需操作),解压hadoop包,并设置环境 8、配置Hadoop相关配置文件 9、将已经修改好的文件使用scp命令复制到各个节点 10、node1 、 node2使环境生效,并验证 11、启动hado...原创 2020-03-11 17:46:44 · 2891 阅读 · 3 评论
分享