架构:
为什么放进kakfa?
Habase,hdfs,hadoop,streaming都可以直接消费。
自定义规则创建分区,放进kafka。
Kafka的数据处理完毕增加标签,保证数据全被处理。
监控数据工具?
Sparkstreaming 360度交互式可视化。
Ganlia
数据落地?
Mysql:数据量小
Redis:数据一般
Habse:数据最大
Memsql,比mysql速度快20倍
Es
Memcatched
架构:
为什么放进kakfa?
Habase,hdfs,hadoop,streaming都可以直接消费。
自定义规则创建分区,放进kafka。
Kafka的数据处理完毕增加标签,保证数据全被处理。
监控数据工具?
Sparkstreaming 360度交互式可视化。
Ganlia
数据落地?
Mysql:数据量小
Redis:数据一般
Habse:数据最大
Memsql,比mysql速度快20倍
Es
Memcatched