流式计算
冰山丶
毕业于山西工商学院,已经有了一年多的工作经验。会javaweb,mysql,ssm框架,redis缓存,rabbitmq等。
展开
-
sparkstreaming的相关知识和案例
sparkstreaming的相关知识 storm,sparkstreaming,flink对比 名字 容错性 吞吐率 延迟 消费语义 strom 低 低 延迟非常低 至少一次(借用tridentAPI也可以实现有且仅有一次) sparkstreaming 很高 很高 延迟高 有且仅有一次 flink 很高 很高 延迟一般 有且仅有一次 特点 容易使用 支持多...原创 2019-07-18 09:31:09 · 126 阅读 · 0 评论 -
sparkstreaming整合kafka
sparkstreaming整合kafka 完成大致的流式计算的架构 离线 flume--->hdfs--->mapreduce/hive--->sqoop--->hbase/mysql/redis/hdfs 流式 flume--->kafka--->storm/sparkstreaming--->mysql/redis/hbase ...原创 2019-07-21 11:19:09 · 225 阅读 · 0 评论