《Storm企业级应用：实战、运维和调优》——第3章 核心概念和数据流模型

本节书摘来自华章计算机《Storm企业级应用：实战、运维和调优》一书中的第3章，作者：马延辉 陈书美 雷葆华著， 更多章节内容可以访问云栖社区“华章计算机”公众号查看。

第3章 核心概念和数据流模型

本章从细节入手，了解Storm的核心概念，包括Stream、Spout、Bolt、Tuple、Task、Worker、Stream Grouping和Topology。Stream是被处理的数据，Spout是数据源，Bolt处理数据，Tuple是数据单元，Task是运行Spout或Bolt中的线程，Worker是运行这些线程的进程，Stream Grouping规定了Bolt接收何种类型数据作为输入。Topology是由Stream Grouping连接起来的Spout和Bolt节点网络。
另外，除了核心概念，本章还介绍数据流模型，从整体上介绍Storm，这样从微观和宏观的角度了解Storm之后，就可以更好地利用Storm这个工具来开展实时处理分析的项目。

亿级异构任务调度框架设计与实践 阿里云日志服务作为云原生可观测与分析平台。提供了一站式的数据采集、加工、查询分析、可视化、告警、消费与投递等功能。全面提升用户的研发、运维、运营、安全场景的数字化能力。 日志服务平台作为可观测性平台提供了数据导入、数据加工、聚集加工、告警、智能巡检、导出等功能，这些功能在日志服务被称为任务，并且具有大规模的应用，接下来主要介绍下这些任务的调度框架的设计与实践。