Hadoop
文章平均质量分 79
小透明y3000
学习
展开
-
Hadoop3.x 完全分布式搭建(详细)
环境准备vm虚拟机(自行安装Centos7系统)hadoop3.x安装包(linux版本)java1.8安装包(linux版本)为了能够按照教程顺利操作,需要注意几点细节不要不看文字直接复制粘贴操作命令的用户很重要,否则后续会引发关于权限的问题ftp 与 终端工具需要自己操作使用本教程不涵盖操作,如有需要,自行百度,本教程均使用终端shell工具截图,其性质与linux系统右键打开终端相同。开始啦!使用root用户登录,用一个单独的用户管理hadoop集群,所以要用管理员(roo原创 2022-03-09 23:19:17 · 2253 阅读 · 1 评论 -
Hadoop常用脚本(更新中)
文章目录Hadoop常用脚本1.xsync同步脚本2.myhadoop.sh集群启动/停止脚本3.jpsall脚本查看各节点组件Hadoop常用脚本1.xsync同步脚本#!/bin/bash#1. 判断参数个数if [ $# -lt 1 ]then echo Not Enough Arguement! exit;fi#2. 遍历集群所有机器for host in hadoop102 hadoop103 hadoop104do echo原创 2022-01-21 15:16:47 · 766 阅读 · 0 评论 -
MapReduce处理数据SSM可视化
网站数据分析一: 语言与环境java hadoop环境要求: eclipse / 虚拟机 / linux / hadoop(hive,hdfs,mysql) / myeclipse(可选)二: 功能要求利用MapReduce对日志文件进行离线分析,将分析后的数据通过ssm可视化展示三: 日志内容 (customer.txt)13726230503,00-FD-07-A4-7...原创 2020-06-04 11:19:00 · 186 阅读 · 0 评论 -
MapReduce处理数据Javaweb展示
大数据认证考试机试D卷项目需求:1.通过 mapreduce 处理源文件文本内容2.存放数据仓库hive规则查询后存入数据库mysql3.最后通过ssm进行页面展示源文件内容: (emp.txt)7369,SMITH,CLERK,7902,17-12月-80,800,,207499,ALLEN,SALESMAN,7698,20-2月-81,1600,300,307521,W...原创 2020-06-12 00:36:00 · 203 阅读 · 0 评论 -
Java操作HDFS
使用Java操作HDFS原创 2022-01-11 16:51:16 · 2351 阅读 · 0 评论