![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据搭建
盖世英雄来了
乾坤未定,你我皆是黑马!
展开
-
Hadoop各进程启动命令(三种启动方式)
(乾坤未定,你我皆是黑马) 本文总结了一下启动hadoop过程中的一些常用命令1.直接启动或者关闭所有的进程(不推荐,由于分布式下,namenode和datanode分布在不同机器上,启动的进程不相同)在启动hadoop进程的时候我们通常都是直接使用(默认hadoop根目录下) sbin/start-all.sh sbin...原创 2018-06-18 18:21:07 · 36800 阅读 · 2 评论 -
Linux下(Centos7)配置静态ip(超详细教学版本)
(乾坤未定,你我皆是黑马)配置虚拟机静态ip开始1.查看电脑主机ip并且吧vmware设置成NAT模式(进入cmd命令行,使用ipconfig查看 ,注意,这里是无线局域网适配器下面的)192.168.1.12.设置虚拟机的静态网关(不要设置成和本机一样的,容易出错,我这里设置成192.168.2.X)3.查看NAT中设置的网关,可以自己设置...原创 2019-07-29 07:36:33 · 6976 阅读 · 1 评论 -
虚拟机重启网卡报错(Job for network.service failed because the control process exited with error code. See “s)
(小哪吒,冲啊,国产动漫加油!!!)有时候使用xshell连接不上虚拟机,但明明刚才还可以连上的,这个时候我通常是重启一下网卡,然后就可以连上了servicenetworkrestart但是今天用这个的时候,Job for network.service failed because the control process exited with error...原创 2019-08-08 10:02:23 · 1108 阅读 · 0 评论 -
hadoop环境搭建官方文档(一)伪分布式搭建
首先学习hadoop集群搭建,最好的方法还是去多看官方文档里面包含各种环境搭建的过程和原因。官方文档:https://hadoop.apache.org/docs/r2.5.2/下载hadoop2.5.0 :http://archive.apache.org/dist/hadoop/common/(这里有hadoop历史上的所有的版本,不过2.5.0版本是相对很稳定的版本,比较适合学...原创 2019-08-12 10:54:22 · 316 阅读 · 0 评论 -
hadoop环境官方文档(二)完全分布式搭建
首先学习hadoop集群搭建,最好的方法还是去多看官方文档里面包含各种环境搭建的过程和原因。官方文档:https://hadoop.apache.org/docs/r2.5.2/下载hadoop2.5.0 :http://archive.apache.org/dist/hadoop/common/(这里有hadoop历史上的所有的版本,不过2.5.0版本是相对很稳定的版本,比较适合学...原创 2019-08-12 11:12:09 · 166 阅读 · 0 评论 -
Haddop入门架构图解
Hadoop项目的四个模块hadoop common(为其他hadoop模块提供基础设施) hdfs(一个高可靠,高吞吐量的分布式文件系统) mapreduce(一个分布式离线的并行计算框架) yarn(任务调度和资源管理)HDFS系统架构图服务功能介绍Namenode:主节点,存储文件的元数据(文件名,目录结构,属性,块列表,块所在的datano...原创 2019-09-18 18:03:39 · 206 阅读 · 0 评论 -
Hive连接数据库失败的原因(NestedThrowables)
NestedThrowables:java.sql.SQLException: Unable to open a test connection to the given database. JDBC url = jdbc:mysql://hadoop:3306/metastore?createDatabaseIfNotExist=true, username = root. Terminati...原创 2019-09-22 09:29:13 · 5222 阅读 · 2 评论 -
阿里云部署hadoop集群启动namenode报错(cannot assign requested address)
在阿里云上部署Hadoop集群报错,无法启动namenode org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.java.net.BindException: Problem binding to [Namenode:9000] java.net.BindException: Cannot...原创 2019-09-30 19:52:02 · 729 阅读 · 0 评论