kettle抽取sybase

windwn 2016-10-13 05:31:20

现在在用kettle做两个sybase之间的抽取工作
有个表比较大，800多w的数据量，但是每次抽取都只能抽取300w左右结束，没有报错，显示正常
是因为我的sybase的连接时间设置的不对么
有没有大神碰到过这个问题，能帮忙解答下，或者kettle有没有其他的抽取方式

...全文

2476 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

MR_SU7 2018-04-26

打赏
举报

回复

楼主你的kettle是什么版本的？连接的sybase的驱动是jconn3吗？我现在也要从sybase抽取数据，但是连接sybase报驱动问题

江河的江 2017-12-25

打赏
举报

回复

你用的插入还是插入更新啊？

windwn 2017-02-28

打赏
举报

回复

慢慢抽吧，现在速度还可以，800w的数据量大约在10分钟左右能抽去完成

学完本课程，您将掌握： PDI/Kettle数仓技术 PDI/Kettle开源免费的ETL推送工具 PDI/Kettle数据清洗 PDI/Kettle数据抽取 PDI/Kettle数据挖掘 PDI/Kettle案例实战 PDI/Kettle技巧 PDI/Kettle9.1版本 PDI/Kettle通用 ...

因为在之前文章sybase链接sqlserver中提到过sybse odbc的创建，所以在本文中直接对odbc进行使用。 1.kettle 9.0 +ODBC kettle9 不支持jdk1.7 ，而目前使用的是jdk1.8，jdk1.8不支持odbc连接，所以该方案被pass...

Kettle性能优化是一个系统工程，不仅涉及工具本身的优化，更涉及ETL工具之外的诸多因素，比如，ETL要读取数据库，那么目标DMBS的性能，SQL语句，网络等相关因素都影响到执行效率。根据Kettle对数据ETL的过程性能调优...

记录kettle的常规操作，将不同数据库的数据整合到一个数据库上，本文以将sybase上的数据抽取放入mysql中为例。打开spoon.bat后，首先需要连接我们需要使用的sybase和mysql服务器（如果kettle7.0打开没有任务是...

其实也蛮简单的，在sppon.bat文件如下位置添加编码配置，然后重启kettle，这个编码格式和你数据库的字符编码格式要一致，比如下面：至于如何查询数据库的编码格式，百度有很多的。转载于:...

2,596

社区成员

25,614

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章