资源数据管理
目录
Overview(概述)
Simple HBase Enrichments/Threat Intelligence(简易Hbase富化/威胁情报)
Extractor Framework(抽取框架)
Enrichment Config(富化设置)
Loading Utilities(载入工具)
Pruning Data from Elasticsearch (ES数据剪枝)
Overview
大量的富化和威胁情报处理一般用以下模式来处理:
- 选定一个值
- 从键值对存储中查找该变量
- 如果该key存在,若是威胁,就报警;若是需要富化的,就利用value来进行key的富化
因此,我们来创造一个最基本的原型用于应对富化和威胁情报来源,它包含以下元素
- Type:富化或威胁情报的种类,比如(malicious_ip)
- Indicator:question中的indicator
- Value:type和indicator的组合,是个json Map。
现在,所有的数据载入工具函数,用于将原始数据源转换成原始的key()type,indicator)和value,都在HBase上。