- 博客(5)
- 收藏
- 关注
RSS订阅原创 Zookeeper介绍
Zookeeper 来源 Google：bigdata包含chubby框架服务，chubby是一个分布式服务，基于paxos算法依据论文使用java语言编程；HBASE zookeeper 掌握 了解数据结构，思想 很多框架依赖于zookeeper HDFS HA yarn HA HBASE kafka Redis 环境搭建 总结：很多框架依赖于zookeeper，在...
2018-06-19 09:57:14
177
原创 Hive MetaStore 配置说明
/* Hive中创建数据库*/CREATE DATABASE IF NOT EXISTS db_0508 COMMENT '用于20180508测试使用'WITH DBPROPERTIES ('user_name'='轩宇') ;/* 为了解决Hive中创建表的时候，注解等中文显示的乱码问题，需要设置MetaStore DataBase中某些字段的字符编码为utf-8 */CREATE TABLE...
2018-06-19 09:52:23
330
原创 基本配置
三个部分： 第一部分、大数据要学什么，怎么学，如何学 第二部分、大数据基础系统环境 第三部分、大数据基础框架HADOOP 2.x快速搭建第一点： 基础 -1. Java SE 大数据技术框架中90%以上都是基于Java语言编写 -2. MySQL SQL on HADOOP -3. Linux系统 大数据技术框架...
2018-06-19 09:14:08
274
原创 MySQL&Hive
Hive Mysql安装 centos自带MySQL插件查询 rpm -aq |grep mysql 删除 sudo rpm -e --nodeps mysql-libs-5.1.66-2.el6_3.x86_64 安装 版本5.7（推荐）/源码安装 5.1/yum安装 客户端：sudo yum install -y mysql 服务端：sudo yum inst...
2018-06-19 09:12:44
192
原创 Hadoop03：网站日志分析与MapReduce执行详解
一、回顾 -》hadoop -》功能 -》解决大数据存储：hdfs -》解决大数据计算：MapReduce -》hadoop2 -》hdfs -》特点 -》分布式：主从 namenode：主节点 -》存储元数据 -》接收处理用户请求 -》管理所有从节点 -》分块 -》副本 -》MapReduce v2 ...
2018-06-19 09:11:23
920
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人