![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
文章平均质量分 79
小透明y3000
学习
展开
-
Hadoop3.x 完全分布式搭建(详细)
环境准备 vm虚拟机(自行安装Centos7系统) hadoop3.x安装包(linux版本) java1.8安装包(linux版本) 为了能够按照教程顺利操作,需要注意几点细节 不要不看文字直接复制粘贴 操作命令的用户很重要,否则后续会引发关于权限的问题 ftp 与 终端工具需要自己操作使用本教程不涵盖操作,如有需要,自行百度,本教程均使用终端shell工具截图,其性质与linux系统右键打开终端相同。 开始啦! 使用root用户登录,用一个单独的用户管理hadoop集群,所以要用管理员(roo原创 2022-03-09 23:19:17 · 2268 阅读 · 1 评论 -
Hadoop常用脚本(更新中)
文章目录Hadoop常用脚本1.xsync同步脚本2.myhadoop.sh集群启动/停止脚本3.jpsall脚本查看各节点组件 Hadoop常用脚本 1.xsync同步脚本 #!/bin/bash #1. 判断参数个数 if [ $# -lt 1 ] then echo Not Enough Arguement! exit; fi #2. 遍历集群所有机器 for host in hadoop102 hadoop103 hadoop104 do echo原创 2022-01-21 15:16:47 · 772 阅读 · 0 评论 -
MapReduce处理数据SSM可视化
网站数据分析 一: 语言与环境 java hadoop 环境要求: eclipse / 虚拟机 / linux / hadoop(hive,hdfs,mysql) / myeclipse(可选) 二: 功能要求 利用MapReduce对日志文件进行离线分析,将分析后的数据通过ssm可视化展示 三: 日志内容 (customer.txt) 13726230503,00-FD-07-A4-7...原创 2020-06-04 11:19:00 · 194 阅读 · 0 评论 -
MapReduce处理数据Javaweb展示
大数据认证考试机试D卷 项目需求: 1.通过 mapreduce 处理源文件文本内容 2.存放数据仓库hive规则查询后存入数据库mysql 3.最后通过ssm进行页面展示 源文件内容: (emp.txt) 7369,SMITH,CLERK,7902,17-12月-80,800,,20 7499,ALLEN,SALESMAN,7698,20-2月-81,1600,300,30 7521,W...原创 2020-06-12 00:36:00 · 213 阅读 · 0 评论 -
Java操作HDFS
使用Java操作HDFS原创 2022-01-11 16:51:16 · 2369 阅读 · 0 评论