大数据
niushaoda
好好学习,天天向上。
展开
-
Hadoop无法启动NameNode和DataNode
Hadoop的相关进程无法正常启动,NameNode和DataNode两个进程无法正常启动,需要查看日志文件找出问题所在:1.遇到权限问题,原因是在root权限下启动了Hadoop,产生了相应的日志,在自己的用户下再次启动会因为无法写入日志而报错。2.日志中报错:Net BindException:address already in use,原因是端口被占用,已经启用的进程再次启用会产生冲突,类原创 2017-07-29 08:21:51 · 1022 阅读 · 0 评论 -
Hadoop集群系统版本安装和启动配置
Hadoop V2:集群系统版本安装和启动配置 实验概述: 本实验手册是基于Hadoop2.6版本进行分布式配置,Linux系统是基于CentOS6.5 64位的版本。在此设置一个主节点和两个从节点。 准备3台虚拟机,分别为: 主机名 IP地址 master 192.168.80.10 slave1 192.翻译 2017-07-29 08:18:39 · 463 阅读 · 0 评论 -
Xshell无法连接本地的VMWRA虚拟机
Xshell无法连接虚拟机上的CentOS系统,原因可能是是win8.1系统的问题,虚拟机的虚拟网卡的配置一直没有出现,window8.1系统的网卡可能和虚拟机的虚拟网卡有冲突,解决办法: 1.首先尝试重装VMVARE,如果并没有解决问题。 2.Win+R弹出运行窗口,输入services.msc进入系统服务,找到Device Install Service和Device Setup Mana原创 2017-07-29 08:24:04 · 415 阅读 · 0 评论 -
Hadoop集群上跑任务,跑到一半就卡住了。
在集群上跑任务的时候,跑到一半就停了,原因是之前在root权限下跑过,所以用户日志的权限是root,在普通用户下去跑的时候会因为写不进去日志而停止,可以将该日志删除后重新跑程序。 有时候我们不小心在root账户下启动了Hadoop,生成的日志文件的权限就是root,在我们回到普通账户下,会因为权限问题无法写入日志而导致集群无法启动。原创 2017-07-29 08:27:30 · 1440 阅读 · 0 评论 -
Hbase的JavaApi和工具类
1.连接Hbase,使用单例模式。修改自己的主机名 package oracle.demo.oow.bd.util.hbase; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.hbase.clie原创 2017-08-31 14:09:25 · 1257 阅读 · 0 评论 -
滴滴实习面试
2019年6月10日 首先是自我介绍,也没准备,简单介绍了一下,然后就开始做题。 1.第一个题:一个升序数组,找一个数第一次出现的位置,想到了二分查找,写了一个大概,但是没有保证是第一次出现的位置, 数据结构和算法不太熟练,需要加强。 2.第二个题:一棵树,叶子结点到根节点是一个数,求和,深度优先搜索。 3.如何实现map HashMap实际上是一个“链表散列”的数据结...原创 2019-06-10 18:29:41 · 1104 阅读 · 0 评论