跨平台跨数据库数据实时同步

Mido5296889 2015-07-15 11:16:50

项目中存在两种数据库，mysql和mssql或oracle(暂未定)，两种数据库的系统平台也不一样，mysql是装在linux下的，另外一种数据库装在windows系统下，现需要将mysql数据库中几张表的数据实时同步到另一个库中，两个库要同步的表结构可能不太一样，求各位大神推荐一种高效的数据实时同步方案，有免费的工具更好。

...全文

268 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

Mido5296889 2015-07-15

打赏
举报

回复

顶一下，怎么没人来了，好冷清啊

课程主要使用c++编程，所有演示代码都是跨平台，在windows平台中课程使用的开发环境为vs2017社区版，linux环境使用的是ubuntu 18.04下的g++和make。课程通过思维导图+代码实操的讲解方式，实现的每一个功能都会对...

Datax 一般比较适合于全量数据同步，对全量数据同步效率很高（任务可以拆分，并发同步，所以效率高），对于增量数据同步支持的不太好（可以依靠时间戳+定时调度来实现，但是不能做到实时，延迟较大）。 Canal 、databus 等由于是通过日志抓取的方式进行同步，所以对增量同步支持的比较好。 OGG 太贵一、早期关系型数据库之间的数据同步二、大数据时代下的数据同步三、总结一、早期关系型数据库之间的数据同步 1）、全量同步比如从oracle数据库中同步一张表的数据到My

本文主要是实现的原理，因为之前一直想不通怎么同步的，想得十分复杂。需求在不同的网络，部署了同一个应用，需要两边网络的数据保持一致，数据同步。 数据库：mysql 思路问题一：要实现数据库同步，首先想到了什么时候需要进行同步？答：数据发生改变时，数据库增删改。问题二：那么怎么知道数据库的数据发生了变化呢？答：通过触发器实现监听? 问题三：跨网怎么实现同步呢？答：使用光闸发送数据。根据问题二，我百度搜索了一下，查找到了canal。 canal canal主要用途是基于 MySQL 数据库增量日志

工作中经常会遇到因为数据量过大而带来的数据迁移与拆分，根据数据表中记录条数的不同，需要采取的策略也不尽相同。数据量较小的表例如：从数据库A中的tableA同步到到数据库B中的tableB 1、为了保证保证数据库A和数据库B中的表可以保持准确可用，通常会在数据库B中建立一张临时表temp。 2、将数据库A中的tableA表跟数据库B中的临时表比较，删除tableA中已经删除的数据，增加tableA中新增的数据，更新表中不同的数据。防止因数据库断开连接造成的问题。 3、待临时表更新完成，在同步到t

需求背景：需要跨网络：从阿里云服务器上的数据库，通过网闸使用ftp传文件的方式，将数据同步到业主的专网中；阿里云跟业主专网不能直连；定时数据增量同步，具体同步哪些表，需要可配置；节约工作量，最大限度上不改变当前表结构、业务流程控制等等；增量操作包含insert、update；delete使用逻辑删除，等价于update 常见应用场景：业主的应用基本都部署在专网中，但是部分业务，需...

其他数据库

2,209

社区成员

9,519

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章