立即注册
登录
About云开发
返回首页
nettman的个人空间
https://www.aboutyun.com/?21
[收藏]
[复制]
[分享]
[RSS]
空间首页
动态
记录
日志
相册
主题
分享
留言板
个人资料
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
首页
Portal
专题
BBS
面试
站内搜索
更多
我的空间
好友
帖子
收藏
道具
勋章
任务
动态
日志
相册
分享
记录
留言板
群组
导读
日志
数据仓库T+1模型思想
已有 892 次阅读
2019-5-27 22:43
|
系统分类:
Hive
首先什么是T+1模型
可以简单理解为数据中的1,2,3,4 ...T, T + 1.
可以理解为,今天之前是一个 T单位的数据,新加一天就是(T + 1)单位的数据。
这里的T可以理解为每天。
然后基本仓库可以分为
1.ODS层:
|-sdm每日的增量表数据
|-fdm部分需要保存全量数据的表。
注:ODS中保存所有的数据,包括以天为粒度的所有数据,包括多个版本的数据。以及全量数据,对比后的全量数据等等。
2.EDW层:
供业务部门进行数据运算,建模等。
路过
鸡蛋
鲜花
握手
雷人
收藏
分享
邀请
举报
全部
作者的其他最新日志
•
k8s搭建大数据平台资源汇总
•
大数据学习记录
•
Impala、Hive如何存储图片
•
kerberos编程遇到问题总结
•
公司选择工作流必备比较:Airflow、Azkaban、Conductor、Oozie
评论 (
0
个评论)
涂鸦板
您需要登录后才可以评论
登录
|
立即注册
评论
nettman
加为好友
给我留言
打个招呼
发送消息
关闭
推荐
/5
About云 VIP会员套餐介绍
about云VIP:帮助大家提升技能、能力、帮助找工作。 里面包含三个套餐,详细点击链接了解
查看 »
会员注册过程中,收不到邮件【查看】
会员注册过程中,收不到邮件【查看】
查看 »
N本书可以置换N*100本书书籍活动
各位About云会员,为了方便各位老铁搜集各种资料,包括大数据、人工智能、微服务、区块链等方面的前沿资料,这里About云耗费一年的时间整理了这方面的资料。如果这里面有你感兴趣的资料,如果你也有这方面的资料【About云非重复资料】,欢迎和我们置换。
查看 »
领取100本书+1T资源
About云长期积累书籍,扫码通过后,赠书给需要的小伙伴
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈