大数据
文章平均质量分 79
十二翼堕落天使
我梦见过许多种我们有可能的未来——无一善终。
展开
-
【Flume】笔记
一、Flume 概述1.1 Flume 定义Flume 是 Cloudera 提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume 基于流式架构,灵活简单。1.2 Flume 基础架构AgentAgent 是一个 JVM 进程,它以事件的形式将数据从源头传送至目的地。Agent 主要由三个部分组成:Source、Channel、Sink。SourceSource 是负责接收数据到 Flume Agent 的组件。Source 组件可以处理各种类型、各种格式的原创 2022-02-26 23:16:12 · 1292 阅读 · 0 评论 -
【Kafka】KRaft 模式单节点安装
安装https://mirrors.tuna.tsinghua.edu.cn/apache/kafka/3.0.0/https://kafka.apache.org/quickstartKRaft 配置config/kraft/README.mdconfig/kraft/server.properties生成集群 IDbin/kafka-storage.sh random-uuid > uuid格式化存储目录bin/kafka-storage.sh for原创 2021-12-20 23:13:39 · 2443 阅读 · 0 评论 -
hadoop-3.2.2 hive-3.1.2 hbase-2.3.5 安装
一、虚拟机环境1.1 校园网 NAT 配置静态 IP参考:ubuntu server 20.04LTS NAT模式配置静态IP解除win10禁ping方法需要注意的是:共享网卡时无法开启热点,可以选择在有开启热点需求的时候取消网卡共享,之后再重新启用网卡共享。教主 VMnet8 网卡分配到的 IP 为 192.168.137.1/24,因此将虚拟机的 VMnet8 子网网段设置为 192.168.137.0/24,并且习惯性的选择将网关 IP 设置为和宿主机的 VMnet8 网卡相同。原创 2021-05-04 14:34:19 · 2237 阅读 · 0 评论