Big Data
PlanDoCheckAction
向死而生。
展开
-
Hadoop 完全分布式环境搭建
Hadoop 环境搭建(二) JDK 安装 下载 JDK 并解压: 解压命令是: tar -svzf 压缩包名 配置 JAVA 环境变量 vi /etc/profile 在最下面添加环境变量信息: export JAVA_HOME=/home/hadoop/jdk1.8.0_251 export PATH=$PATH:$JAVA_HOME/bin 然后再输入命令: source /etc/profile 至此,一台服务器上的 java 环境就配置好了。 再配置其余三台服务器,由于其余三台服务器没原创 2020-07-31 17:35:06 · 402 阅读 · 0 评论 -
Hadoop 之 CentOS7 集群搭建
Hadoop 环境搭建(一) 新建虚拟机及 Linux 环境搭建 修改网络配置 进入 CentOS7 操作系统,输入命令: vi /etc/sysconfig/network-scripts/ifcfg-ens33 修改两处: BOOTPROTO=static ONBOOT=yes 添加下述代码: IPADDR=192.168.87.100 GATEWAY=192.168.87.2 NETMASK=255.255.255.0 DNS1=8.8.8.8 注:以下三原创 2020-07-31 17:29:52 · 338 阅读 · 0 评论 -
Meet Hadoop
初识 Hadoop Hadoop 是什么 Hadoop 是一个由 Apache 基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和海量存储。 Hadoop 官网的原话是:The Apache Hadoop project develops open-source software for reliable, scalable, distributed computing。 意思是 Hadoop 是一个可靠的、可扩展的、分布式的计算框架。原创 2020-07-31 17:16:17 · 151 阅读 · 0 评论 -
Meet Big Data
初识大数据 什么是大数据 大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 大数据主要解决海量的数据存储和分析计算的问题。 这里的海量指的是 TB、PB、EB 级及以上的数据量。 大数据的特性是什么 大数据的特征可用五个 V 去概况,即:Volume(数据量大)、Velocity(数据产生和处理速度快)、Variety(数据类型多样)、Value(价值密度低,商业价值高)、Vera原创 2020-07-31 17:10:39 · 213 阅读 · 0 评论