hadoop
IT菜籽U
当你发现自己的才华撑不起野心时,就请安静下来学习吧
展开
-
个人感觉一篇很不错的文章-----《Hadoop核心技术》作者翟周伟 :我与Hadoop的不解之缘
源自:http://www.csdn.net/article/2015-05-13/2824661-Hadoop摘要:翟周伟,资深Hadoop技术专家,《Hadoop开源云计算平台》、《Hadoop核心技术》作者。日前,CSDN记者对他进行了采访,请他解读Hadoop发展现状、特性及发展前景,以及这一路走来的心路历程。翟周伟,资深Hadoop技术专家,专注于Hadoop&大数据原创 2015-10-12 16:29:26 · 791 阅读 · 0 评论 -
SNN 未被启动异常
一 异常原因SecondaryName未被启动 如图:二 异常分析查看日志如图所示,blockpooId中IP地址发生了改变,导致在启动hadoop集群时发找到SNN位置所在三 解决方案进入到namesecondary版本文件中 命令如下vim hadoopdata/dfs/namesecondary/current/VERS原创 2015-10-28 19:46:53 · 654 阅读 · 0 评论 -
hadoop 完全分布式 下 datanode无法启动解决方法
问题导读:1、hadoop 完全分布式 和伪分布式下 datanode无法启动的原因?2、怎么解决?问题描述:在集群模式下更改节点后,启动集群发现 datanode一直启动不起来。我集群配置:有5个节点,分别为master slave1-5 。在master以hadoop用户执行:start-all.shjps查看master节点启动情况:转载 2015-11-27 16:37:00 · 4585 阅读 · 0 评论 -
hadoop学习之hadoop完全分布式集群安装
:本文的主要目的是为了记录自己的学习过程,也方便与大家做交流。转载请注明来自:http://blog.csdn.net/ab198604/article/details/8250461 要想深入的学习hadoop数据分析技术,首要的任务是必须要将hadoop集群环境搭建起来,可以将hadoop简化地想象成一个小软件,通过在各个物理节点上安装这个小软件,然后将其运行起来,就是一个ha转载 2015-11-27 15:03:18 · 701 阅读 · 0 评论 -
Alex 的 Hadoop 菜鸟教程: 第12课 Sqoop1 安装/导入/导出教程
原帖地址: http://blog.csdn.net/nsrainbow/article/details/41575807Sqoop是什么sqoop是用于在传统关系型数据库跟hdfs之间进行数据导入导出的工具。目前sqoop已经出了2,但是截至当前,sqoop2还是个半成品,不支持hbase,功能还很少,所以我还是主要讲sqoop1安装Sqoop1[plai转载 2016-01-28 11:39:45 · 999 阅读 · 0 评论 -
hadoop core-site.xml(hadoop.tmp.dir)
core-site.xml>>>>>hadoop.tmp.dir是Hadoop文件系统依赖的基础配置,很多路径都依赖它。它默认的位置在/tmp/{$suer}下面,但是在/tmp路径的存储是不安全的,因为Linux一次重启,文件就可能被删除原创 2016-02-04 17:05:44 · 2528 阅读 · 0 评论 -
Sqoop工具实现,hive、Hbase、HDFS与mysql、oracle数据导入
文将重点说明通过Sqoop实现Mysql与HDFS互导数据,Mysql与Hbase,Oracle与Hbase的互导最后给出命令。一、Mysql与HDFS互导数据环境:宿主机器操作系统为Win7,Mysql安装在宿主机上,宿主机地址为192.168.66.963台虚拟机操作系统为Ubuntu-12.04.1-32位三台虚拟机已成功安装Hadoop,并实现免密钥互访,配hosts为原创 2016-04-22 13:19:37 · 1907 阅读 · 0 评论 -
Hue安装链接数据库失败
链接:https://www.linuxidc.com/Linux/2017-01/139518.htm异常原因:Unexpected error. Unable to verify database connection.#yum install -y python-lxml转载 2018-04-11 13:49:45 · 1703 阅读 · 0 评论