Storm

更新时间：01-02

\"Storm\"是一个开源的分布式实时计算系统，由Twitter公司在2011年开源，主要用于处理大规模、高并发的流式数据。它具备强大的实时数据处理能力，能够对持续不断流入系统的数据进行实时分析和处理，并将结果近乎实时地输出。 在架构设计上，Storm采用了主从式的分布式模型，包括Nimbus节点（类似于Hadoop中的JobTracker）负责任务分配与监控，以及Worker节点（运行具体任务）和Supervisor节点（资源管理）。其核心概念是“Topology”，即一种数据流处理网络模型，通过Spout（数据源）和Bolt（处理组件）的组合，形成复杂的数据处理流水线。 Storm提供了一种简单易用、容错性强、可扩展性高的实时计算解决方案，适用于实时日志分析、在线机器学习、实时统计分析等多种应用场景