ETL的工作原理

jin_ok 2014-08-22 01:31:04

接触Informatic不久，E、T、L这三个步骤是并行的还是串行的？

...全文

2224 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

弹指神通 2014-12-26

打赏
举报

回复

这个我觉得可能是要根据逻辑来看吧，理论上来说ETL是可以并行的，但是有的逻辑，比如你mapping里面有sorter之类的，load肯定是在extract之后。

jin_ok 2014-08-25

打赏
举报

回复

我测试的情况是这样的，Load这个步骤不是并行的，一个10分钟的任我，数据是在最后的1分钟之内装载的，抽取和转换可能是在内存中并行进行的

Etl本质原理和关键技术介绍 ETL（Extract, Transform, Load）是一种数据整合解决方案，旨在将来自不同数据源的数据提取、转换和加载到目标系统中。在数据仓库系统中，ETL扮演着关键的一环，它不是一次性的工作，...

ETL，即Extract-Transform-Load的缩写，是数据仓库建设中的核心步骤，主要涉及数据的抽取、转换和装载。...理解ETL的基本原理并结合实际业务场景，才能有效提升ETL流程的效率和数据仓库的整体性能。

`kettle文档.doc`、`kettle工具介绍.doc`和`Kettle培训手册.pdf`等文档详细介绍了Kettle的基础概念、工作原理以及如何使用它进行数据集成。`Kettle 2.4.0 change log.pdf`记录了版本更新历史，帮助用户了解新功能和...

优化方案：ETL的过程原理和数据仓库建设.txt 基于云技术的电信ETL方案+IBM刀片性能测试报告.pdf 如何使用ETL_技术.pdf 数据仓库ETl工具箱3.pdf 数据仓库ETl工具箱5.pdf 数据仓库ETl工具箱6.pdf 数据仓库ETl...

首先，我们来深入理解一下Kettle的工作原理。Kettle的核心组件包括 Spoon（设计工具）、Pan（批处理执行）、Kitchen（命令行批处理）和Selena（调度器）。通过Spoon，用户可以创建和编辑转换（Transformations）和...

248

社区成员

377

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章