Apache Metron是OpenSOC(安全大数据分析框架)加入Apache的工程项目。
Ambari是一个能让大家能够方便快速的配置和部署Hadoop生态圈相关的组件环境,并提供维护和监护的功能。
先决条件:
需要7种服务:
① Hadoop Master
② Hadoop Slave
③ Ambari Server
④ Metron Installer
⑤ Metron Search
⑥ Metron Probe
⑦ Metron Web
Hadoop 集群环境要求
(1)使用Centos 6.x版本
(2)Ambari 2.2.x
(3)需要2个minimun版的Hadoop master节点以及4个Hadoop Slave 节点
(4)搭建每个节点需要:
8-16 GB 内存
4 核
100 GB 硬盘
(5)在每个节点需要安装hadoop服务:
HDFS 2.7.1
YARN+MapReduce 2.7.1
Hive 1.2.1
HBase 1.1.2
Pig 0.15.0
Sqoop 1.4.6
ZooKeeper 3.4.6
Storm 0.10.0
Flume 1.5.2
Ambari Metrics 0.1.0
Kafka 0.9.0
Spark