- 博客(5)
- 资源 (3)
- 收藏
- 关注
原创 【Maven】win10系统安装Maven
本文主要介绍如何在win10系统上安装Maven操作环境:Windows10Maven版本: apache-maven-3.6.31. 下载Maven安装包打开Maven官网下载页面,下载如图安装包:2. 解压到安装目录请按实际情况选择安装目录,如安装到D盘:3. 复制Maven的bin目录4. 配置环境变量4.1 右键点击 “此电脑”,选择 “属性”4.2 点击...
2020-04-12 14:41:08 420
原创 【Kafka】测试Kafka整合Flume
本文将会简单介绍Kafka如何整合Flume,从而实现"日志 -> Flume -> Kafka"操作环境:Kafka版本:1.0.1Flume版本:1.6.0测试前需满足以下条件:已安装Kafka和FlumeKafka已启动1. 配置Flume的conf文件vi /home/hadoop/flume-kafka.conf#2. 创建Flume的监控目录...
2020-04-12 00:18:45 280
原创 【Kafka】命令行管理topic
1. 创建topic[hadoop@node03 bin]$ kafka-topics.sh --create --partitions 3 --replication-factor 2 --topic test --zookeeper node01:2181,node02:2181,node03:2181Created topic "test".参数说明:partitions: 指定...
2020-04-11 20:32:01 1312 3
原创 【Flume】Flume简单介绍
1. 概述Flume是一个分布式、可靠和高可用的海量日志采集、聚合和传输系统。Flume可以采集多种数据,如:文件、socket数据包、文件夹、Kafka等,还可以将采集到的数据输出到HDFS、HBase、Hive等多种存储系统。[Flume官方网站](http://flume.apache.org/)有更详细的介绍。2. 运行机制Flume中最核心部分是agent,每个agent都是一...
2020-04-11 16:32:24 407
原创 【Hive】Hive的三种交互方式
1. Hive shell[hadoop@node03 ~]$ cd /kkb/install/hive-1.1.0-cdh5.14.2/[hadoop@node03 hive-1.1.0-cdh5.14.2]$ bin/hive2. JDBC2.1 后台先启动hive服务[hadoop@node03 ~]$ nohup hive --service hiveserver2 &...
2020-04-06 10:25:31 609
Python Indent插件
2017-09-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人