xx消费金融数仓建设

TASKCTL交流社区

成都塔斯克信息技术有限公司官方账号

2022-06-28 15:39:27

企业名称

xxx消费金融

案例背景

2019年xxx消费金融筹备数仓项目，最终通过选型，企业通过了数据库供应商“星环科技”及调度服务商“成都塔斯克信息技术”；该项目于2020年成立，我司“塔斯克信息技术”也参与项目实施，项目主要业务流程为：定时从外部采集数据-->通过ETL工具处理数据-->将数据入仓等待被调用

案例实施

主要调度方式为：定时调度
调度时段：每天、每小时、间隔2小时、特定时间（自定义）
数据源：解决多数据源，多节点控制繁琐的问题
结果：所有调度作业都能直观了解运行结果

案例图片

...全文

247 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

数仓概念梳理数仓分层常见分层思路、案例案例1：互联网金融 ODL层 (Operational Data Layer)：操作数据层外部数据什么样，该层数据就是什么样（关系型数据库、JSON格式等)，部分关系型数据可以直接转IDL层 BDL层 (Base Data Layer)：基础数据层 ODL层经过简单格式化解析后存储到BDL层，常见于JSON日志格式的解析。 IDL层 (Interface Data Layer)：接口层，也称主题表，宽表由BDL层经过去重、去噪、字典翻译、空

执行架构是EDW的概念环境，主要包含：源数据、数据落地区、ETL、数据准备区、数据存储区EDW、业务应用、用户环境、数据管控、系统安全性以及EDW基础设施平台（包括：服务器、存储、网络）等功能组件。从技术层面上来说，EDW系统的执行架构应实现多种技术平台及应用之间的无缝集成。下图中给出了EDW的运维架构，是在EDW系统上线后，为了保持系统良好的稳定性而定义的相关的管理需求。运维架构主要是针对执行架构的数据导入层、数据服务层、中间服务层和访问控制层服务器进行管理，面向的最终用户是IT人员。

数仓指标体系建模方法1、指标体系2、指标建设过程中遇到的问题3、指标建设方法论3.1、北极星指标3.2、OSM+UJM 模型4、指标的构成4.1、指标分类4.2、指标分级5、如何设立指标体系5.1、为什么要建立数据指标体系5.2、如何建立指标体系 OSM 模型知乎的例子滴滴的例子5.3、指标衡量的是什么5.4、如何有效衡量“什么”5.5、如何衡量指标的好坏确定核心指标拆解核心指标5.6、指标迭代6、评价指标体系7、指标管理6.1、指标的管理—指标字典6.2、指标的管理—指标模板6.3、指标的管理—指标分类8

建设指标体系，需要回答以下几个问题为什么建设数据指标体系如何评价数据指标体系，一个好的数据指标体系是要需要回答两个问题，它是不是有助于业务发展，以及说这个指标体系拆解是不是可具备、可落地、可实操的可能性。如何建设数据指标体系，这就需要我们的建设方法论了如何维护和管理指标，指标的维护和管理是有套路的，最简单的指标管理方法——指标字典，我们在此基础上可以做指标管理系统OSM 实现了业务目标结构化，UJM 实现了业务目标流程化。数据指标体系其实只是数据赋能业务的万里长征的第一步。

数仓建模指标体系

Taskctl学习交流社区

16

社区成员

110

社区内容

发帖

与我相关

我的任务

数据仓库etl运维企业社区四川省·成都市

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章