![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 58
iteye_8560
这个作者很懒,什么都没留下…
展开
-
Hadoop使用笔记三 --hadoop环境安装问题汇总
注:linux服务器的用户名/密码:root/lijian1.准备Linux环境 1.0点击VMware快捷方式,右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段:192.168.8.0 子网掩码:255.255.255.0 -> apply -> ok 回到windows --> 打开网络...原创 2016-05-06 14:19:50 · 129 阅读 · 0 评论 -
hadoop2编译
64位centos 下编译【2.X后官网只有32位编译后的文件】首先从官网下载hadoop源码这里(我使用的是2.6.3),并且你的虚拟机必须是可以上网这样maven依赖包就可以获得编译需要的环境sudo yum -y install gcc*sudo yum -y install cmakesudo yum -y install glibc-headerssudo yum...原创 2016-05-15 18:10:47 · 94 阅读 · 0 评论 -
Hadoop使用笔记二 -- hadoop2.6.3配置并启动
虚拟机的密码都是root/lijian虚拟机以4台linux的主机在你的hosts加入各台虚拟机[code="java"]192.168.8.129 CentOS1192.168.8.131 CentOS2192.168.8.130 CentOS3192.168.8.132 CentOS4[/code][img]http://dl2.iteye.co...原创 2016-05-17 09:42:49 · 100 阅读 · 0 评论 -
hadoop中常见的错误
[b]hadoop的mapreduce作业出现Java heap space解决方案[/b] 在配置文件maprd-site中设置mapred.child.java.opts:-Xmx1024m[b]hadoop执行出现Unable to initialize any output collector[/b] 检查代码是否有导错包。 设置你的maprd-site的属性Map Tas...原创 2016-05-20 13:32:44 · 80 阅读 · 0 评论 -
hive使用load加载数据1.0
安装hive直接操作hive[code="java"]create table if not exists L_EMPLOYEE (eid int,name String,salary String,destination String)COMMENT 'Employee details' ROW FORMAT delimitedfields terminated by '\t...原创 2016-09-29 16:21:39 · 646 阅读 · 0 评论 -
Hadoop使用笔记一 --之了解hadoop
[color=red]之前研究hadoop但是笔记和记录都比较散,以后定期的整理到这技术博客中,希望可以帮到大家[/color]:[b]HDFS数据存储[/b][i]NameNode:[/i]接收客户端的读写服务,NameNode保存metadata信息包括:文件owership和permission,文件包含那些块,block保存在那个DataNode上。【datan...原创 2017-04-23 17:37:46 · 146 阅读 · 0 评论