【大数据】Storm
自然语言处理-nlp
熟能生巧
展开
-
storm并行度详解
1、Storm并行度相关的概念 Storm集群有很多节点,按照类型分为nimbus(主节点)、supervisor(从节点),在conf/storm.yaml中配置了一个supervisor,有多个槽(supervisor.slots.ports),每个槽就是一个JVM,就是一个worker(一个节点,运行一个worker),在每个worker里面可以运行多个线程叫做executor,在exec转载 2017-07-27 09:55:33 · 443 阅读 · 0 评论 -
storm介绍
Storm笔记 Hadoop与storm对比: Hadoop: 1) 优点:吞吐量大,自动容错,在海量数据处理上得到广泛应用。 2) 缺点:不擅长实时计算,天然为批处理而生,高延迟,响应缓慢,运维复杂。 Storm: 1)优点:低延迟,高性能,分布式,运维简单,可扩展,高度容错(一个节点挂了,不能影响整体应用) ,无数据丢失, 消息不丢失 容易在上面开发应用程序 多语言(提交部原创 2017-07-25 20:28:55 · 722 阅读 · 0 评论