跪求大神！kettle如何实现定时将每日业务库增量同步到备用库！

zhenS1mple 2021-05-20 09:15:34
描述：各位大神，我oracle数据库小白，前些日子接到老板需要的一个数据仓库的任务，在面向百度一翻操作后了解到数据仓库的一些知识，首先就是有个数据分层的概念，说到数据分层这时候就遇到了一个数据同步的问题，几番搜索结合自身情况，感觉kettle合适，需要将每天的业务数据增量导入到数据仓库的元数据层。但是百度许久，未能找到一些合理的办法，希望各路大神给点建议和帮助。
...全文
3740 1 打赏 收藏 转发到动态 举报
写回复
用AI写文章
1 条回复
切换为时间正序
请发表友善的回复…
发表回复
Jasowen 2021-08-26
  • 打赏
  • 举报
 回复

估计已经找到了吧，没有的话看这里

http://www.spring4all.com/article/600

解决SQLSERVER数据库驱动程序无法通过使用安全套接字层(SSL)加密与 SQL Server 建立安全连接问题JAR包
用于解决SQLSERVER连接问题驱动程序无法通过使用安全套接字层(SSL)加密与 SQL Server 建立安全连接问题JAR包。
Kettle实现数据库的增量同步
kettle实现两个Mysql数据库的增量同步
使用Kettle实现数据实时增量同步
0. 前言 本文介绍了使用Kettle对一张业务表数据（500万条数据以上）进行实时（10秒）同步，采用了时间戳增量回滚同步的方法。关于ETL和Kettle的入门知识大家可以阅读相关的blog和文档学习。 1. 时间戳增量回滚同步 假定在源数据表中有一个字段会记录数据的新增或修改时间，可以通过它对数据在时间维度上进行排序。通过中间表记录每次更新的时间戳，在下一个同步周期时，通过这个时...
【Kettle】—— Kettle增量同步变动数据
需求： 最近在用kettle同步数据的时候，有增量同步的需求。 之前也遇到过这个需求，查阅了很多文章，也试了很多方法，都没有实现我所需的简洁的方式。 这回在我一次次尝试无果的情况下，突然间的灵光一闪，让我豁然开朗，原来你就在我眼前。 写下这篇文章，让更多的人的时间得到节省。 时间是最稀缺的资源，更多的时间应该花在更有意义的事情上。 软件相关： 使用软件 kettle ...
KETTLE实现MYSQL增量同步和全量同步
什么是增量同步 什么是全量同步 全量同步： 每天定时（避开业务高峰期）或者周期性全量把数据从一个地方拷贝到另外一个地方，包括系统和所有数据。这种备份方式每次都需要对系统和所有数据进行一次全量备份。 如上，如果两次备份之间数据没有任何变化，那么两次备份的数据是一样的。也就是说100GB的数据即使没有发生任何数据变化，也会多耗费100GB的存储空间去做备份。但这种备份方式最大的好处就是在恢复丢失数据时，只需要对一个完整的备份进行操作就能够恢复丢失数据，大大加快了系统或数据恢复的时间 增量同步： 增量备份即在第一
数据仓库

7,394

社区成员

6,741

社区内容

发帖
与我相关
我的任务
社区描述
其他数据库开发 数据仓库
社区管理员
  • 数据仓库
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告
暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章