数仓建模—OneData体系
建模 体系 数仓
2023-09-11 14:15:37 时间
OneData
现有较为流行数据中台构建方法论是一般沿用阿里系那套(当然也有其他大厂做,方法论类似)做法,其中数据仓库构建部分也是使用OneData数仓建模方法论。
这里关于OneData数仓做一点说明,其不是除Innmon 3NF范式建模、Kimball维度建模以及Valut建模方法之外新数仓建模方法论,OneData建模方法论本质上是Kimball维度建模方法论结合平台系统,划分数据域,标准化了建模流程、固化了建模动作验证并保证模型元素(数据域,业务过程、来源表、表和指标中文和英文名称、计算口径等)唯一性的一种实践。
最终可以降本增效
数据体系建设中遇到的常见问题
- 数据孤岛:各产品、业务的数据相互隔离,难以通过共性ID打通
- 重复建设:重复的开发、计算、存储,带来高昂的数据成本
- 数据歧义:指标定义口径不一致,造成计算偏差,应用困难
接下来我们看一下阿里是怎么解决这个问题的
对阿里OneData的思考
- 整个OneData体系覆盖范围广,包含
相关文章
- Google Earth Engine(GEE) ——在谷歌地球引擎中使用随机森林分类进行生境适宜性建模(加入气温和其它波段分类)
- 【CT算法,radon变换】基于MATLAB的CT算法,radon变换的三维建模仿真
- 深入实践Spring Boot2.3.2 文档建模
- 《贝叶斯思维:统计建模的Python学习法》一2.6 M&M豆问题
- 《贝叶斯思维:统计建模的Python学习法》一2.8 练习
- 《Power Designer系统分析与建模实战》——3.4 本章小结
- 《威胁建模:设计和交付更安全的软件》——第1章 潜心开始威胁建模1.1 学习威胁建模
- 《软件建模与设计: UML、用例、模式和软件体系结构》一一2.11 本书的约定
- 《软件建模与设计: UML、用例、模式和软件体系结构》一一3.3 软件生存周期的活动
- UML建模之时序图
- ER图,数据建模与数据字典
- 研究生数学建模历年题目汇总
- 余胜威《MATLAB数学建模经典案例实战》2015年版