110_业务数仓_拉链表理论

zhchzh1000 2023-01-12 18:50:15

课时名称	课时知识点
110_业务数仓_拉链表理论	110_业务数仓_拉链表理论

...全文

56 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

什么是拉链表，拉链表要怎么做，拉链的弊端和好处？

目录数仓理论表的分类实体表维度表事务型事实表周期型事实表同步策略实体表同步策略维度表同步策略事务型事实表同步策略周期型事实表同步策略范式理论范式概念函数依赖三范式区分关系建模与维度建模关系模型维度模型雪花模型、星型模型和星座模型电商业务数仓介绍电商业务流程电商表结构电商常识（SKU、SPU）订单表（order_info）订单详情表（order_detail）商品表用户表商品一级分类表商品二级分类表商品三级分类表支付流水表电商业务数仓创建业务数据生成业务数据导入数仓sqoop导入数据的脚本ODS层表的同步策略

电商业务及数据结构 SKU库存量单位，剩余多少；现在已经被引申为产品统一编号的简称，每种产品均对应有唯一的SKU号；每个商品都是一个SKU，每个SKU都有自己独立的库存数。也就是说每一个商品详情展示都是一个SKU（比如iPhone手机的SKU--银色、128G内存、支持联通网以这个为单位记录库存数）。SPU商品聚集的最小单位，这类商品的抽象，提取公共的内容；比如一个商品关联了其他好...

数据仓库是一个为数据分析而设计的企业级数据管理系统。数据仓库可集中、整合多个信息源的大量数据，借助数据仓库的分析能力，企业可从数据中获得宝贵的信息进而改进决策。同时，随着时间的推移，数据仓库中积累的大量历史数据对于数据科学家和业务分析师也是十分宝贵的：工作流定时调度器如果把数据看作图书馆里的书，我们希望看到它们在书架上分门别类地放置；如果把数据看作城市的建筑，我们希望城市规划布局合理；

由此带来了大量的存储、计算资源的开销，并且随着该表的持续膨胀，里边数据也没有清退机制，快照会越滚越大，而且还清贷款的数据，所有属性状态是不会再变动的。该场景，我们的数据起止日期（t_start_date、t_end_date）就不适用了，因为理论上，商品价格一天可能会变更多次，必须改成数据起止时间（t_start_time、t_end_time），由此带来的数据处理逻辑的变化，上边 4.4 增量更新的处理逻辑就不适用了，必须改用 4.3 历史数据初始化方式了。奥，看了好久，下边 SQL 的数据止期有问题。

张长志的课程社区_NO_5

1

社区成员

538

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章