社区
杨俊的课程社区_NO_5
【完整】Flink大数据实时仓库项目实战
帖子详情
129.搭建数仓ADS层-车辆出行数据统计
俊哥大数据
2024-12-28 09:58:17
课时名称
课时知识点
129.搭建数仓ADS层-车辆出行数据统计
129.搭建数仓ADS层-车辆出行数据统计129.搭建数仓ADS层-车辆出行数据统计
...全文
66
回复
打赏
收藏
129.搭建数仓ADS层-车辆出行数据统计
课时名称课时知识点129.搭建数仓ADS层-车辆出行数据统计129.搭建数仓ADS层-车辆出行数据统计129.搭建数仓ADS层-车辆出行数据统计
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
大
数据
项目之
数仓
项目(一)
数仓
搭建
一、项目框架版本 名称 版本 hadoop 3.1.3 flume 1.9.0 kafka 2.11-2.4.1 zookeeper 3.5.7 mysql 5.1.27 sqoop 1.4.6 spark 3.0.0 hive 3.1.2 二、
数仓
分
层
ODS :原始
数据
层
DWD:
数据
明细
层
DWS:
数据
服务
层
,轻微聚合 DWT:
数据
主题
层
,
ADS
:
数据
应用
层
。 本项目采用星型维度建模 三、
数仓
搭建
1、hive
搭建
...
1.8万字详解实时
数仓
建设方案
一、实时
数仓
建设背景1. 实时需求日趋迫切目前各大公司的产品需求和内部决策对于
数据
实时性的要求越来越迫切,需要实时
数仓
的能力来赋能。传统离线
数仓
的
数据
时效性是 T+1,调度频率以天为单位,无法支撑实时场景的
数据
需求。即使能将调度频率设置成小时,也只能解决部分时效性要求不高的场景,对于实效性要求很高的场景还是无法优雅的支撑。因此实时使用
数据
的问题必须得到有效解决。2. 实时...
松果
出行
x StarRocks:实时
数仓
新范式的实践之路
作者:松果
出行
数据
中台部门松果
出行
成立于 2017 年,以“构建更智慧的交通基础设施,提升全球所有人的移动能力”为使命,定位于“以工业互联网为基础的交通科技公司”。松果
出行
创新打造“工业互联网在交通科技领域的典型样本”,构建由工业基础、落地产品、数字引擎和科技应用组成的完整产业生态。松果智能工厂(合肥)是全球首个电动两轮车智能自动化整装工厂,以严格的国标车型,满足政府监管...
旅游集市项目
数仓
建设案例与分
层
设计
旅游集市
数仓
建设 目录旅游集市
数仓
建设旅游集市项目架构图旅游集市
数据
分
层
设计图为什么要设计
数据
分
层
?分
层
设计ODS(Operational Data Store):
数据
运营
层
(
数据
贴源
层
)DW(Data Warehouse):
数据
仓库
层
DWD(Data Warehouse Detail):
数据
明细
层
DWM(Data Warehouse Middle):
数据
中间
层
DWS(Data Warehous...
数仓
搭建
理论基础
数仓
搭建
思路以及前提理论
杨俊的课程社区_NO_5
2
社区成员
637
社区内容
发帖
与我相关
我的任务
杨俊的课程社区_NO_5
1.自我介绍 杨俊 大数据高级工程师 15年开发经验,10年大数据从业经验 擅长Hadoop、Spark、Flink等主流大数据技术 51cto单个平台拥有35万粉丝 2.授课经验 中国移动、新华三(H3C)等企业内训经验 首经贸大学、河北燕大等高校师生培训经验 3.个人成就 著书《大数据开发工程师面试笔试宝典》、《实战大数据(Hadoop+Spark+Flink)》、《Hadoop大数据技术基础及应用》、《实战大数据-分布式大数据分析处理系统开发与应用》 技术咨询与交流vx:dashuju_2017
复制链接
扫一扫
分享
社区描述
1.自我介绍 杨俊 大数据高级工程师 15年开发经验,10年大数据从业经验 擅长Hadoop、Spark、Flink等主流大数据技术 51cto单个平台拥有35万粉丝 2.授课经验 中国移动、新华三(H3C)等企业内训经验 首经贸大学、河北燕大等高校师生培训经验 3.个人成就 著书《大数据开发工程师面试笔试宝典》、《实战大数据(Hadoop+Spark+Flink)》、《Hadoop大数据技术基础及应用》、《实战大数据-分布式大数据分析处理系统开发与应用》 技术咨询与交流vx:dashuju_2017
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章