hadoop
zzulikang
一个小菜鸡
展开
-
LZO创建索引
配置:使的hadoop支持LZO压缩1 将hadoop-lzo-0.4.20.jar 放入hadoop-2.7.2/share/hadoop/common/,然后同步到集群2 core.xml添加配置信息,并且同步<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><configuration><property原创 2020-07-10 14:14:18 · 1156 阅读 · 0 评论 -
从零开始的hadoop集群搭建
克隆虚拟机配置好的Linux虚拟机-> 管理 -> 克隆1 删除网卡,复制物理地址:vim /etc/udev/rules.d/70-persistent-net.rules删除eht0的那一行,将下一行的eth0改为eth1**2 配置网络:**vim /etc/sysconfig/network-scripts/ifcfg-eth0(删除UUID)IPADDR=192.168.1.101 设置ipONBOOT=yesNM_CONTROLLED=yesB00TPROTO原创 2020-07-07 22:56:37 · 1144 阅读 · 0 评论 -
hadoop完全分布式(云服务器版)
使用的是三台云服务器,两台腾讯云,一台华为云,使用的系统为centos6.8遇到的坑有点多,所以记录下来,防止自己忘记,也给大家一个参考前期准备hadoop和jdk的tar解压jdk和hadoop的环境变量配置vim /etc/profile##JAVA_HOMEexport JAVA_HOME=/opt/module/jdk1.8.0_144export PATH=$PA...原创 2019-12-11 12:09:34 · 275 阅读 · 0 评论