- 博客(4)
- 收藏
- 关注
RSS订阅原创 Hadoop作业(Mysql的下载安装)
1.下载mysql 2.将其上传到linux下/opt/software中 MySQL :: Download MySQL Community Server 3.检查当前系统是否安装过Mysql: rpm -qa|grep mariadb rpm -qa|grep mariadb mariadb-libs-5.5.56-2.el7.x86_64 //如果存在通过如下命令卸载 4.rpm -e --nodeps mariadb-libs //用此命令卸载mariadb 5.将其...
2021-12-08 14:28:25
1512
原创 Hadoop笔记（伪分布式搭建）
HDFS是进行存储的，YARN是进行调度的 1.切换到hadoop下面的etc（配置文件都在etc下面） 2.在hadoop中配置core-site.xml Vi core-site.xml 指定HDFS中namenode的地址。将命令放到configuration标签中 <configuration> <!-- 指定HDFS中NameNode的地址 --> <property> <name>fs.defaultFS</name>
2021-12-07 14:30:36
1294
原创 配套安装：Hadoop 3.1.3Zookeeper3.5.7Hbase2.2.0
一、文件解压 cd /opt/module/ tar -zxvf hbase-2.2.0-bin.tar.gz 二、修改启动变量 系统环境增加 vi /etc/profile export HBASE_HOME=/opt/module/hbase-2.2.0 export PATH=$PATH:$HBASE_HOME/bin 保存系统环境变量：source /etc/profile 修改hbase变量 cd /opt/module/hbase-2.2.0/conf/ vi..
2021-12-06 19:29:57
1577
1
原创 Hadoop 概念
Hadoop 整体设计 Hadoop 框架是用于计算机集群大数据处理的框架，所以它必须是一个可以部署在多台计算机上的软件。部署了 Hadoop 软件的主机之间通过套接字 (网络) 进行通讯。 Hadoop 主要包含 HDFS 和 MapReduce 两大组件，HDFS 负责分布储存数据，MapReduce 负责对数据进行映射、规约处理，并汇总处理结果。 Hadoop 框架最根本的原理就是利用大量的计算机同时运算来加快大量数据的处理速度。例如，一个搜索引擎公司要从上万亿条没有进行规约的数据中筛选和归纳热
2021-12-06 16:30:28
202
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人