Informatica在抽取数据的时候会遗漏数据吗？

晦灭 2020-02-18 02:29:51

最近在工作中总是发现有数据缺失的现象，我们使用的是按时间进行增量抽取，缺失的数据是某几天里每天缺失一两条数据，不是全天都缺，也不是每天都缺，就是偶尔几天会每天缺上一两条，请问这是软件的问题吗？有大神知道吗？

...全文

138 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

数据挖掘一些面试题总结.doc

医疗数据具有显著的多样性特点。从数据类型来看，涵盖了结构化数据，如患者的基本信息、检验检查结果等，这些数据通常以表格形式存储，便于查询和分析；半结构化数据，像电子病历中的文本描述部分，虽有一定结构但不完全规范；以及非结构化数据，例如医学影像（X光片、CT扫描等）、音频（听诊记录）和视频（手术过程录像）等。这些不同类型的数据为医疗研究和临床决策提供了丰富的信息维度，但也增加了数据处理的难度。医疗数据的复杂性体现在其内部的关联关系错综复杂。

ETL是Extract、Transfrom、Load即抽取、转换、加载三个英文单词首字母的集合：E：抽取，从源系统(Souce)获取数据；T：转换，将源系统获取的数据进行处理加工，比如数据格式转化、数据精度转换、数据清洗、缺失数据补齐、异常数据排除等。L：加载，将数据加载到目标数据库(Target)。ELT也是同样三个单词的首字母组合，只是把T、L颠倒了下顺序。ETL强调的是先进性数据转换，然后再加载到目标。这个转换过程可以在原系统进行，也可以在中间环境进行进行。

Informatica 是一款领先的数据集成软件平台。它提供了一系列工具和技术，用于在企业的各种数据源和目标系统之间进行数据的抽取、转换和加载（ETL）操作。从背景上来说，在企业信息化进程中，数据分散在不同的系统里，如数据库系统、文件系统等。这些数据的格式、结构、语义等各不相同。Informatica 的出现就是为了解决这些问题。它主要解决的问题包括数据集成。例如，企业可能有传统的关系型数据库存储业务数据，同时还有一些来自外部数据源的数据，如市场调研报告、传感器数据等。

ETL和ELT ETL是Extract、Transfrom、Load即抽取、转换、加载三个英文单词首字母的集合： E：抽取，从源系统(Souce)获取数据； T：转换，将源系统获取的数据进行处理加工，比如数据格式转化、数据精度转换、数据清洗、缺失数据补齐、异常数据排除等。 L：加载，将数据加载到目标数据库(Target)。 ELT也是同样三个单词的首字母组合，只是把T、L颠倒了下顺序。ETL强调的是先进性数据转换，然后再加载到目标。这个转换过程可以在原系统进行，也可以在中间环境进行进行。而ELT是

248

社区成员

377

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章