学习笔记
文章平均质量分 78
Hadoopman
这个作者很懒,什么都没留下…
展开
-
hadoop完全分布环境搭建
设备:win10操作系统,内存4G 软件:vnware workstation,secureCRT,xftp 材料:centos7镜像文件、jdk1.8.0_144、hadoop-2.7.4 一、安装虚拟机 在虚拟机中新建两个centos7虚拟机,一个分配内存1G作为namenode,另一个分配512M作为datanode(可以根据自己主机的内存而定,博主内存4G不足以将3个dat原创 2017-09-10 17:13:18 · 729 阅读 · 0 评论 -
Mapreduce多表关联与词频统计程序运行结果输出到Hbase的两个途径
hbase的eclipse集成开发环境搭建 1.在原来搭建的hadoop的eclipse环境中导入hbase目录下lib中的所有jar包 导入到hadoop原来的classpath中(Referenced Libraries)中即可 2.在mapreduce项目中新建conf文件夹,导入hbase-site.xml文件 3.Referenced Libraries构建路径,导入co原创 2017-09-28 16:40:22 · 681 阅读 · 0 评论 -
Hive安装与配置
Hive的安装配置 一、mysql的安装配置 1.官网下载 http://dev.mysql.com/downloads/mysql/5.5.html#downloads 以下五个rpm包 mysqlserver client devel shared shared-compat 2.安装 rpm -iUvh MySQL-server-5.5.57-1.e原创 2017-09-28 16:43:42 · 210 阅读 · 0 评论 -
Hbase伪分布与集群搭建
#zookeeper environment settings export ZOOKEEPER_HOME=/usr/local/hadoop2.7.4/zookeeper3.4.10 export PATH=${ZOOKEEPER_HOME}/bin:$PATH export CLASSPATH=${ZOOKEEPER_HOME}/lib:$CLASSPATH zookeeper安装与原创 2017-09-28 16:28:12 · 388 阅读 · 0 评论 -
linux上部署hadoop的集成开发环境+倒排索引程序测试
一、centos7系统上部署mapreduce的eclipse开发环境 linux版eclipse下载地址:http://www.eclipse.org/downloads/download.php?file=/technology/epp/downloads/release/neon/3/eclipse-jee-neon-3-linux-gtk-x86_64.tar.gz&mirror_id=原创 2017-09-20 15:44:33 · 316 阅读 · 0 评论