![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据科学与大数据技术萌新
网恋教父258
she just live her life.
展开
-
Hadoop集群安装配置
hadoop集群安装配置Title: Hadoop集群安装配置Author:liguangmanEmail: 2990244047@qq.com一:基础设置创建用户:useradd lgm -m修改密码:passwd lgm进入创建好的用户:su lgm看此时的路径:修改主机名:Sudo vim /etc/hostname把原机名改为mastere.g:映射:vim /etc/hosts把安装包传进来:1:从别的节点scp2:从 xshell自带的原创 2020-08-15 12:56:07 · 192 阅读 · 0 评论 -
hadoop单机版搭建最全教程,不会来问我
hadoop单机版搭建hadoop基础平台单击部署author:lgmEMAIL:2996244047@qq.com(qq邮箱一上来,瞬间low到起飞)修改/etc/hosts[root@westgis167~]# hostnamectl set-hostname hadoop[root@westgis167~]# su -[root@westgis167~]# vim /etc/hosts 10.103.104.167 westgis16710.103.104.168 westg原创 2020-08-11 22:49:32 · 277 阅读 · 0 评论 -
元气少女赵本山和她的hadoop初学笔记打卡
元气少女赵本山和她的hadoop初学笔记打卡数据科学与大数据技术 下学期学Hadoop 提前复习一下Linux基本操作。新学期让我们不挂科。(一)系统级别命令1:查看当前Linux信息:uname -a --显示系统及版本所有信息uname -r 显示内核版本uname -m 显示计算机是多少位系统2:hostname:查看当前主机名3:ifconfig eth0:查看网卡4...原创 2019-02-21 00:06:11 · 156 阅读 · 0 评论 -
日向雏田的Hadoop初学之Linux文件操作
2019-3-3(三)文件操作1:cd 进入操作2:创建文件和目录mkdir /tmp/test01 //创建空文件夹mkdir -p/data1/hadoop/hdfs/name //递归创建文件夹touch /tmp/test01/file.txt //创建空文件夹vi file.log //创建空文件夹并进入编辑模式echo>file.txt //创建fi...原创 2019-03-30 16:54:43 · 1115 阅读 · 0 评论 -
IAAS,PAAS,SAAS是什么
IAAS( Information as a service ) :基础平台服务(只是虚拟机+物理机,无软件)PAAS(platform as a service) :平台机服务(提供了软件但需要写程序 )SAAS(software as a service) :软件机服务 (只需要使用就行)...原创 2019-03-30 17:08:00 · 210 阅读 · 0 评论 -
mapreduce下的wordcount和terasort对比
要求:1,选取wordcount和sort两个程序,每个程序五个输入数据集2,wordcount数据集(20M,100M,500M,1G,2G)3,sort数据集(20M,100M,500M,1G,2G)4,对每个程序分别对比程序执行时间5,选几个重要的性能计数器(6个以上),观察性能计数器的变化6,画图表,总结分析一、操作过程:Wordcount操作(1)使用dd命令产生5个文...原创 2019-07-23 22:13:34 · 477 阅读 · 0 评论