2020年07月_PlanDoCheckAction

原创 Hadoop 完全分布式环境搭建

Hadoop 环境搭建(二)JDK 安装下载 JDK 并解压：解压命令是：tar -svzf 压缩包名配置 JAVA 环境变量vi /etc/profile在最下面添加环境变量信息：export JAVA_HOME=/home/hadoop/jdk1.8.0_251export PATH=$PATH:$JAVA_HOME/bin然后再输入命令：source /etc/profile至此，一台服务器上的 java 环境就配置好了。再配置其余三台服务器，由于其余三台服务器没

2020-07-31 17:35:06 402

原创 Hadoop 之 CentOS7 集群搭建

Hadoop 环境搭建（一）新建虚拟机及 Linux 环境搭建修改网络配置进入 CentOS7 操作系统，输入命令：vi /etc/sysconfig/network-scripts/ifcfg-ens33修改两处：BOOTPROTO=staticONBOOT=yes添加下述代码：IPADDR=192.168.87.100GATEWAY=192.168.87.2NETMASK=255.255.255.0DNS1=8.8.8.8注：以下三

2020-07-31 17:29:52 338

原创 Meet Hadoop

初识 HadoopHadoop 是什么Hadoop 是一个由 Apache 基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和海量存储。Hadoop 官网的原话是：The Apache Hadoop project develops open-source software for reliable, scalable, distributed computing。意思是 Hadoop 是一个可靠的、可扩展的、分布式的计算框架。

2020-07-31 17:16:17 151

原创 Meet Big Data

初识大数据什么是大数据大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据主要解决海量的数据存储和分析计算的问题。这里的海量指的是 TB、PB、EB 级及以上的数据量。大数据的特性是什么大数据的特征可用五个 V 去概况，即：Volume（数据量大）、Velocity（数据产生和处理速度快）、Variety（数据类型多样）、Value（价值密度低，商业价值高）、Vera

2020-07-31 17:10:39 213

原创 Linux 常用命令

Linux 处理目录的常用命令ls：列出目录及文件名；cd：切换目录；pwd：显示目前的目录；mkdir：创建一个新的目录；rmdir：删除一个空的目录；cp：复制文件或目录；rm：移除文件或目录；mv：移动文件与目录，或修改文件与目录的名称。我们可以在终端使用 man [命令] 来查看各个命令的使用文档，如：man cp。ls（列出目录）常用语法： ls [-adl] 目录名称选项参数：-a：全部的文件，连同隐藏文件（开头为 . 的文件）一起列出来；-d：仅列出目

2020-07-17 13:52:01 231

原创 Linux 目录结构

Linux 系统的目录结构进入 Linux 系统后，打开终端，进入根目录，输入 ls 命令，可以看到根目录下的文件结构，如图所示：利用 ls 命令我们可以了解到 Linux 的目录结构，Linux 的目录结构如下所示：以下是对这些目录的解释：/：根目录；/bin：bin 是 Binary 的缩写，这个目录存放着最经常使用的命令；/boot：这里存放的是启动 Linux 时使用的一些核心文件，包括一些连接文件以及镜像文件；/dev：dev 是 Device（设备）的缩写，该目录下存放的是

2020-07-17 13:49:14 132

PlanDoCheckAction