OracleETL数据抽取问题？

sunbosky 2011-01-09 01:44:46

用powercenter做数据抽取的时候，有时候会报一下错误？
-1116:ORA-01116: error in opening database file 209
ORA-01110: data file 209: '/dev/vg_jzpt/rlvjzpt31'
ORA-27041: unable to open file
HPUX-ia64 Error: 23: File table overflow
Additional information: 3
请高手解决!!!

...全文

215 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

tangren 2011-01-09

打赏
举报

回复

修改内核相关参数，参考nfile和maxfiles.
nfile是系统允许在同一时间打开的最大文件数，是file descriptor table的slots数量，可以调到很大。
maxfiles是单个进程可以打开的最大文件数，根据应用来定，一般开到2048或4096就够了。

文本信息抽取是信息检索、智能问答、智能对话等人工智能应用的重要基础，它可以克服自然语言非形式化、不确定性等问题，发掘并捕获其中蕴含的有价值信息，进而用于文档智能审核、知识库及知识图谱构建、流程自动化等...

数据抽取是指从源数据源系统抽取需要的数据。实际应用中，数据源较多采用的是关系数据库。总体而言，数据抽取的常见方法有两大类，一是基于查询式的，一是基于日志的。基于查询式的数据抽取基于查询式的数据抽取，顾名思义，以从来源库来源表查询数据为主。总体又有几种：触发器方式，增量字段方式，时间戳方式等等。触发器方式（又称快照式）在要抽取的表上建立需要的触发器，一般要建立插入、修改、删除三个触发器，每当源表中的数据发生变化，就被相应的触发器将变化的数据写入一个临时表，抽取线程从临时表中抽取数据，临时表中抽

数据抽取(抽数)，是指从源数据系统抽取数据到目标数据源系统。数据抽取分为全量抽取和增量抽取：全量抽取：将数据源中的表或视图原封不动的从数据库中抽取到目标系统。增量抽取：捕获变化数据，仅对自上次导出之后变化数据（增、删、改）进行抽取。对捕获方法有两点要求----1：准确 2：不要对业务系统造成太大压力捕获方法： 1.触发器捕获：源表在增删改时加触发器。把变化数据录入临时表。目标系统从临时表中抽取数据。 2.源表中增加时间戳，数据变化后更新时间戳值，根据时间判断去抽取。 3.全表删除插入：抽取时

什么是数据抽取　　数据抽取是指从源数据源系统抽取目的数据源系统需要的数据。实际应用中，数据源较多采用的是关系数据库。 [编辑] 数据抽取的方式　　(一) 全量抽取　　全量抽取类似于数据迁移或数据复制，它将数据源中的表或视图的数据原封不动的从数据库中抽取出来，并转换成自己的ETL 工具可以识别的格式。全量抽取比较简单。　　(二) 增量抽取　　增量抽取只抽取自上次抽取以来

常见的数据抽取模式有4种：全量覆盖抽取，全量追加，增量和增量滚动。全量覆盖例子：假设第一天源头库有100条数据，第二天源头库新增10条，源头库即110条。那么第一天抽取：目标库100条，第二天抽取会删除昨天抽取的100条，然后重新抽取，此时目标库也是110条。优点：理解简单，数据质量好，适用于小数据量的表。缺点：大数据量的时候，占用资源，且抽取速度慢。结论：全量覆盖抽取，抽取的时刻始终和源库数据保持一致。覆盖是一个先删除后拷贝的过程。全量追加例子：第一天源头库有100条数据，第二天源头库新增1

基础和管理

17,377

社区成员

95,127

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章