hadoop总结
铁头娃1740
若不是生活所迫,谁愿意把自己弄的一身才华
展开
-
Hadoop3.0集群详细搭建步骤
一、搭建Hadoop3.X1.1配置服务器1个主节点:centos100(192.168.65.128),2个(从)子节点:centos101(192.168.65.129),centos102(192.168.65.130)1.2配置主节点名(192.168.65.128)vi /etc/sysconfig/network添加内容:NETWORKING=yesHOSTNAME=centos100...原创 2018-07-09 13:12:57 · 6288 阅读 · 2 评论 -
Oozie4.3.1安装指南详解
一、环境支持Oozie4.3.1Centos 6.5Java JDK 1.8Maven 3.5.4Hadoop2.7.4Pig0.17二、安装步骤详解Java的安装1、解压安装包tar -zxvf jdk-8u73-linux-x64.gz -C /export/service2、配置环境变量vi /etc/profileexport JAVA_HOME=/export/service/jdk1....原创 2018-07-09 19:44:16 · 1491 阅读 · 0 评论 -
ElasticSearch简单入门案例
1、原生操作使用 Xput创建索引说明:RESTful接口URL的格式:http://localhost:9200/<index>/<type>/[<id>]其中index、type是必须提供的。id是可选的,不提供es会自动生成。index、type将信息进行分层,利于管理。index可以理解为数据库;type理解为数据表;id相当于数据库表中记录的主键,是唯...原创 2018-07-11 16:27:32 · 4909 阅读 · 0 评论 -
Sqoop导入导出
Sqoop 导入“导入工具”导入单个表从 RDBMS 到 HDFS。表中的每一行被视为 HDFS 的记录。所有记录都存储为文本文件的文本数据(或者 Avro、sequence 文件等二进制数据)。下面的语法用于将数据导入 HDFS。$ sqoop import (generic-args) (import-args)Sqoop 测试表数据在 mysql 中创建数据库 userdb,创建三张表: e...原创 2018-07-11 16:31:20 · 429 阅读 · 0 评论