《Storm实时数据处理》一1.1 简介
实时 简介 1.1 数据处理 storm
2023-09-11 14:19:11 时间
本节书摘来华章计算机《Storm实时数据处理》一书中的第1章 ,第1.1节,(澳)Quinton Anderson 著 卢誉声 译更多章节内容可以访问云栖社区“华章计算机”公众号查看。
1.1 简介本章将简要介绍Storm处理系统。这将涵盖所有你想知道的内容,从搭建你的开发环境到部署Topology时需要注意的操作关注事项,再到基本的质量实践,比如对Storm Topology进行单元测试和集成测试。在阅读完本章后,你将能够构建、测试和交付基本的Storm Topology。
本书并不准备对Storm处理系统及其元语和架构进行理论介绍。我们假定你在阅读本书之前已经通过浏览如Storm wiki这样的在线资源了解了Storm的基本概念。
当系统在产品环境中能持续可靠地产生商业价值时,才能交付系统。为了实现这个目的,在开发Storm Topology时,必须始终考虑质量问题和操作注意事项。
基于 Flink 的典型 ETL 场景实现 本文将从数仓诞生的背景、数仓架构、离线与实时数仓的对比着手,综述数仓发展演进,然后分享基于 Flink 实现典型 ETL 场景的几个方案。
Kafka+Flink 实现准实时异常检测系统 异常检测可以定义为“基于行动者(人或机器)的行为是否正常作出决策”,这项技术可以应用于非常多的行业中,比如金融场景中做交易检测、贷款检测;工业场景中做生产线预警;安防场景做入侵检测等等。 根据业务要求的不同,流计算在其中扮演着不同的角色:既可以做在线的欺诈检测,也可以做决策后近实时的结果分析、全局预警与规则调整等。
相关文章
- 实时互动体验质量标准XLA:声网憋了6年的大招是如何制定的?
- 小米架构师:亿级大数据实时分析与工具选型
- 《大数据系统构建:可扩展实时数据系统构建原理与最佳实践》一 1.3 NoSQL不是万能的
- 《大数据系统构建:可扩展实时数据系统构建原理与最佳实践》一导读
- 使用 Ganglia 对 Linux 网格和集群服务器进行实时监控
- MySQL数据直接实时同步到ES
- 分布式实时日志:ELK 的部署架构方案
- 基于大数据分布式流处理技术的实时反欺诈解决方案
- 《例说8051:单片机程序设计案例教程》——1-5 实时练习
- Airwallex 基于 Flink 打造实时风控系统
- 如何降低 Flink 开发和运维成本?阿里云实时计算平台建设实践
- 《Storm分布式实时计算模式》——2.7 总结
- 《Storm实时数据处理》一2.1 简介
- 《Storm实时数据处理》一2.8 创建日志分析面板
- MATLAB | App Designer·我用MATLAB制作了一款LATEX公式实时编辑器
- C#之实现label文本内容的实时更新
- 淘宝平台进行数据的实时传输: TimeTunnel介绍
- 新趋势:RFID技术处理行李 方便行李实时追踪