![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 85
Distantfbc
这个作者很懒,什么都没留下…
展开
-
Flume框架应用
Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。原创 2022-03-11 10:46:36 · 232 阅读 · 0 评论 -
Flume快速入门&&企业开发案例
选项参数:-t或--tcp:显示TCP传输协议的连线状况;-u或--udp:显示UDP传输协议的连线状况-n或--numeric:直接使用ip地址,而不通过域名服务器-l或--listening:显示监控中的服务器的Socket-p或--programs:显示正在使用Socket的程序识别码(PID)和程序名称原创 2022-02-15 02:00:00 · 171 阅读 · 0 评论 -
Flume的概述
包括Impala、Hue、Flume都属于专有框架,就是只干一件事。第一结构简单不复杂,第二功能比较单一。原创 2022-02-13 01:00:00 · 967 阅读 · 0 评论 -
分区——合理设置Map及Reduce数、复杂文件增加Map数
合理设置Map及Reduce数如果MapReduce数据量过少,则单个的处理数据量过大;如果MapReduce数据量过多,则抢资源。原创 2022-02-11 21:37:45 · 2197 阅读 · 0 评论 -
HIVE企业级调优
其实hive的调优就是hadoop的调优。因为hive本质上就是mapreduce,大部分和hadoop都很像。原创 2022-02-11 21:29:53 · 781 阅读 · 0 评论 -
Hive压缩和存储
主要介绍hive的优化功能。原创 2022-01-27 16:00:00 · 556 阅读 · 0 评论 -
Hive函数
函数原创 2022-01-26 18:45:09 · 87 阅读 · 0 评论 -
Hive的查询操作(二)
分桶及抽样查询和其他基本查询操作原创 2022-01-24 08:15:00 · 2639 阅读 · 0 评论 -
Hive查询操作(一)
查询数据仓库是典型的查多写少,这个是根据HDFS本身的特点来的。HDFS本身不支持随机修改,只支持追加。所以Hive读多改少,写就写一遍,重点在查询。查询的用处在方方面面都有,比如insert等,都需要查询。https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Select查询语句语法: [WITH CommonTableExpression (, CommonTableExp...原创 2022-01-22 22:16:04 · 2806 阅读 · 0 评论 -
DML数据操作
DML数据操作原创 2022-01-22 22:00:01 · 1250 阅读 · 0 评论 -
DDL数据定义
DDL数据定义、创建数据库、查询数据库、修改数据库、删除数据库、创建表、分区表、修改表 、删除表 、Hive数据呈现方式、错误解决等原创 2022-01-21 10:00:00 · 406 阅读 · 0 评论 -
Hive数据类型
基本数据类型、集合数据类型、类型转化原创 2022-01-20 20:28:55 · 141 阅读 · 0 评论 -
Hive安装、Hive基本操作与常见属性配置
Hive安装地址、Hive安装部署 、MySQL安装 、Hive元数据配置到MySQL、Hive基本操作、将本地文件导入Hive案例 、HiveJDBC访问、Hive常用交互命令、Hive其他命令操作、Hive常见属性配置原创 2022-01-19 09:30:00 · 1328 阅读 · 0 评论 -
Hive基本概念
Hive基本概念,什么是hive原创 2022-01-18 16:39:45 · 98 阅读 · 0 评论 -
Zookeeper内部原理
Zookeeper内部原理,Stat结构体,监听器原理,Paxos算法(扩展)等原创 2022-01-18 16:19:48 · 194 阅读 · 0 评论 -
Zookeeper实战(开发重点)
Zookeeper实战(开发重点)、分布式安装部署、客户端命令行操作、API应用、箭头服务器节点动态上下线案例(扩展)原创 2022-01-15 09:00:00 · 1144 阅读 · 0 评论 -
Zookeeper安装
Zookeeper安装,本地模式安装部署和配置参数解读原创 2022-01-14 08:00:00 · 55 阅读 · 0 评论 -
Zookeeper入门
Zookeeper入门,Zookeeper是一个开源的分布式的,为分布式应用提供协调服务的Apache项目。原创 2022-01-13 16:44:44 · 714 阅读 · 0 评论