Yahoo! s4和Twitter storm的粗略比较
2023-03-14 22:28:58 时间
| ItemsProjects |
Yahoo! s4 |
Twitter Storm |
| 协议 |
Apache license 2.0 |
Eclipse Public License 1.0 |
| 开发语言 |
Java |
Clojure,Java,Clojure编写了核心代码 |
| 结构 |
去中心化的对等结构 |
有中心节点nimbus，但非关键 |
| 通信 |
可插拔的通讯层，目前是基于UDP的实现 | 基于facebook开源的thrift框架 |
| 事件/Stream |
<K,A>序列，用户可自定义事件类 | 提供Tuple类，用户不可自定义事件类， 但是可以命名field和注册序列化器 |
| 处理单元 | Processing Elements，内置PE处理 count,join和aggregate等常见任务 |
Bolt，没有内置任务，提供IBasicBolt处理 自动ack |
| 第三方交互 |
提供API,Client Adapter/Driver，第三方客户端输入或者输出事件 | 定义Spout用于产生Stream，没有标准输出API |
| 持久化 | 提供Persist API规范，可根据频率或者次数做 持久化 |
无特定API，用户可自行选择处理 |
| 可靠处理 | 无，可能会丢失事件 | 提供对事件处理的可靠保证（可选） |
| 路由 | EventType + Keyed attribute + value匹配 内置count,join和aggregate标准任务 |
Stream Groupings: Shuffle,Fields,All,Global,None,Direct 非常灵活的路由方式 |
| 多语言支持 | 暂时只支持Java | 多语言支持良好，本身支持Java,Clojure， 其他非JVM语言通过thrift和进程间通讯 |
| Failover |
部分支持，数据无法failover | 部分支持，数据同样无法failover |
| Load Balance |
不支持 | 不支持 |
| 并行处理 | 取决于节点数目，不可调节 | 可配置worker和task数目，storm会尽量将worker和task均匀分布 |
| 动态增删节点 | 不支持 |
支持 |
| 动态部署 |
不支持 | 支持 |
| web管理 | 不支持 | 支持 |
| 代码成熟度 | 半成品 | 成熟 |
| 活跃度 | 低 | 活跃 |
| 编程 | 编程 + XML配置 |
纯编程 |
| 参考文档 | http://docs.s4.io/ | https://github.com/nathanmarz/storm/wiki/ http://xumingming.sinaapp.com/category/storm/ （非常好的中文翻译) |
相关文章
- 在 Go 里用 CGO？这 7 个问题你要关注！
- 9款优秀的去中心化通讯软件 Matrix 的客户端
- 求职数据分析，项目经验该怎么写
- 在OKR中，我看到了数据驱动业务的未来
- 火山引擎云原生大数据在金融行业的实践
- OpenHarmony富设备移植指南（二）—从postmarketOS获取移植资源
- 《数据成熟度指数》报告：64%的企业领袖认为大多数员工“不懂数据”
- OpenHarmony 小型系统兼容性测试指南
- 肯睿中国（Cloudera）：2023年企业数字战略三大趋势预测
- 适用于 Linux 的十大命令行游戏
- GNOME 截图工具的新旧截图方式
- System76 即将推出的 COSMIC 桌面正在酝酿大变化
- 2GB 内存 8GB 存储即可流畅运行，Windows 11 极致精简版系统 Tiny11 发布
- 迎接 ecode：一个即将推出的具有全新图形用户界面框架的现代、轻量级代码编辑器
- loongarch架构介绍（三）—地址翻译
- Go 语言怎么解决编译器错误“err is shadowed during return”？
- 敏捷：可能被开发人员遗忘的部分
- Denodo预测2023年数据管理和分析的未来
- 利用数据推动可持续发展
- 在 Vue3 中实现 React 原生 Hooks（useState、useEffect），深入理解 React Hooks 的