qq_27710549的博客

Flume提供了四种监控方式：JMX Reporting、Ganglia Reporting、JSON Reporting、Custom Reporting，选择最简单的JSON Reporting方式，监控方案是JSON Reporting + flume_exporter + Prometheus + Grafana。JSON Reporting请参考官方文档http://flume.a...

1. 安装使用的是imply版本下载路径:https://imply.io/get-started需要填写一些个人信息才可以下载2. 集群规划-------------------------------------------------------192.168.112.40      | 192.168.112.41 | 192.168.112.42--------------...

HDP2.6.1升级到HDP2.6.5，使用的是离线升级的方式1.下载ambari安装包，下载地址为 https://hortonworks.com/downloads/#data-platform2.备份之前的yum源sudo mv /etc/yum.repos.d/HDP.repo /etc/yum.repos.d/HDP.repo.baksudo mv /etc/yum.repos.d/HD...

kafka-manager部署源码地址 https://github.com/yahoo/kafka-manager修改配置项，配置项可以打包之前修改，也可以打包之后修改修改conf目录下的 application.conf配置文件配置zookeeper地址,kafka-manager.zkhosts = xxx:2181访问时是否需要密码,默认是false,不需要密码, basicAuthent...

ambari由2.5.1升级到2.6.2，采用的是离线升级的方式1.下载ambari安装包，下载地址为 https://hortonworks.com/downloads/#data-platform2.备份之前的yum源sudo mv /etc/yum.repos.d/ambari.repo /etc/yum.repos.d/ambari.repo.bak3.修改yum源，所有节点都要修改sud...

flink on yarn部署flink on yarn需要的组件与版本如下Zookeeper 3.4.9 用于做Flink的JobManager的HA服务hadoop 2.7.2 搭建HDFS和Yarnflink 1.3.2 或者 1.4.1版本（scala 2.11）Zookeeper, HDFS 和 Yarn 的组件的安装可以参照网上的教程。在zookeeper，HDFS 和Yarn的组件的...

JournalNode无法启动问题排查

Flink Rest API使用----------------### 1. 上传jar包接口- 请求路径 - http://hadoop3.test.yunwei.puppet.dh:40610/jars/upload- 请求方式 - POST- 请求参数 - 设置请求头 application/java-archive- 返回结果 ...