KV存储的对比
2023-03-14 22:33:24 时间
最近对各种KV存储进行一个比较，从存储引擎到存储引擎的类型，到单机版的kvstore，再到分布式kvstore集群。
存储引擎的类型
| 类型 | 全称 |
|---|---|
| btree | |
| LSH | Log-Structured Hash Table |
| LSM | Log-Structured Merge Tree |
| FractalTree | 分型树 |
存储引擎
| 类型 | 名称 | 语言 | 备注 | 应用在___ | dbengine排名 | 出品 | |
|---|---|---|---|---|---|---|---|
| berkeleyDB | BTREE, HASH, QUEUE, RECNO | C,Java | No.9 | oracle | |||
| Wiredtiger | btree, LSM | C | mongodb | No.24 | WiredTiger/mongodb | ||
| Tokyo Cabinet /Kyoto Cabinet | b+tree,hash table | nmdb,Kyoto Tycoon | NO.27/No.36 | FAL Labs | |||
| LMDB | btree | C | OpenLDAP | symas | |||
| BoltDB | btree | Go | LMDB的go版本 | ||||
| leveldb | LSM | c++ | No.15 | ||||
| goleveldb | LSM | Go | leveldb的go版本 | 个人 | |||
| levigo | LSM | Go | Go wrapper for LevelDB | 个人 | |||
| rocksdb | LSM | c++,java | No.18 | ||||
| gorocksdb | LSM | Go | Go wrapper for RocksDB | 个人 | |||
| mongo-rocks | LSM | C++ | RocksDB Storage Engine Module for MongoDB | mongo partner | |||
| bitcast | LSH | C | beansdb,riak | basho | |||
| PerconaFT | FractalTree | C++ | Mysql存储引擎之TokuDB | percona | |||
单机kvstore
| 类型 | 名称 | 采用的存储引擎 | 语言 | 出品 | 主从复制 | github star | |
|---|---|---|---|---|---|---|---|
| kv对 | nmdb | qdbm, berkeley db, tokyo cabinet,tdb | C | 个人Alberto Bertogli | |||
| kv对 | memcachedb | Berkeley DB | C | 新浪 | yes | ||
| kv对 | Kyoto Tycoon | Kyoto Cabinet | C/C++ | FAL Labs | |||
| 结构化kv(redis兼容） | ssdb | leveddb | C/C++ | 个人ideawu | yes | 4k+ | |
| 结构化kv(redis兼容） | ssdb-rocks | rocksdb | C/C++ | 个人ideawu | 92 | ||
| 结构化kv(redis兼容） | ardb | LevelDB, RocksDB, LMDB, WiredTiger | C++ | 个人yinqiwen | yes | 800+ | |
| 结构化kv(redis兼容） | (reborndb)qdb | Rocksdb and LevelDB | Go | 个人ngaut | 200+ | ||
| 结构化kv(redis兼容） | Pika | Rocksdb | C | Qihoo360 | yes | 900+ | |
| 结构化kv(redis兼容） | LedisDB | LevelDB, goleveldb, LMDB, RocksDB, BoltDB or Memory | Go | 个人SiddonTang | 2K+ | ||
单机kvstore的分布式代理
| 名称 | 语言 | 存储 | 出品 | 应用/githubstar | 分片 | 弹性 | 备注 |
|---|---|---|---|---|---|---|---|
| Reborndb | Go | qdb | 个人ngaut | 200+ | yes | yes | |
| Netflix Dynomite | C | redis,memcached | Netflix | 1.9K+ | Dynamo | ||
| Codis | Go | codis-server(定制redis) | 社区CodisLabs | 5K+ | |||
| Twenproxy | C | redis,memcached | 6K+ | ||||
分布式KVstore
| 类型 | 名称 | 语言 | 出品 | dbengine排名/githubstar | 存储引擎 | 社区活跃 | 特性 | 备注 | |
|---|---|---|---|---|---|---|---|---|---|
| kv型 | riak | erlang | basho | No.3/2K+ | bitcask | Dynamo | |||
| kv型 | beansdb | C | douban | 600+ | bitcask模型 | 近2年没有更新，没有文档 | Dynamo | ||
| kv型 | project Voldmort | Java | No.29/1.8K+ | BDB-JE,MySQL,Read-Only | |||||
| kv型 | Scalris | erlang | Zuse Institute Berlin | No.35/88 | |||||
| kv型 | aeospike | aespike | No.7 | ||||||
| kv型 | Tair | C/C++ | alibaba | 400+ | 自研的fdb | 停止更新，没有文档 | |||
相关文章
- 在 Go 里用 CGO？这 7 个问题你要关注！
- 9款优秀的去中心化通讯软件 Matrix 的客户端
- 求职数据分析，项目经验该怎么写
- 在OKR中，我看到了数据驱动业务的未来
- 火山引擎云原生大数据在金融行业的实践
- OpenHarmony富设备移植指南（二）—从postmarketOS获取移植资源
- 《数据成熟度指数》报告：64%的企业领袖认为大多数员工“不懂数据”
- OpenHarmony 小型系统兼容性测试指南
- 肯睿中国（Cloudera）：2023年企业数字战略三大趋势预测
- 适用于 Linux 的十大命令行游戏
- GNOME 截图工具的新旧截图方式
- System76 即将推出的 COSMIC 桌面正在酝酿大变化
- 2GB 内存 8GB 存储即可流畅运行，Windows 11 极致精简版系统 Tiny11 发布
- 迎接 ecode：一个即将推出的具有全新图形用户界面框架的现代、轻量级代码编辑器
- loongarch架构介绍（三）—地址翻译
- Go 语言怎么解决编译器错误“err is shadowed during return”？
- 敏捷：可能被开发人员遗忘的部分
- Denodo预测2023年数据管理和分析的未来
- 利用数据推动可持续发展
- 在 Vue3 中实现 React 原生 Hooks（useState、useEffect），深入理解 React Hooks 的