Web 开发
高难度问题：java mysql海量数据复制 一致性问题
墨衍会员 · AI 创作全网分发 墨衍智能分发 通过墨衍一键同步至各平台 可同步平台 CSDN微信公众号微博知乎掘金百家号博客园抖音小红书 你的文章也可以这样分发 墨衍会员 ¥399起/年，写一次发全网
我也要 关注 + 加入社区hi，伙伴们！
我有一个业务需求，需要从一个表中批量读取大量数据，然后保存到另一个表中。数据量会有几十万甚至几百万条。
初步设计通过spring的quatz来定时执行。
但是在复制的过程中，如何能够确保数据的一致性呢？
我自己想了几个方案，但是都不够满意，不知道有没有大牛能够解答？
我有一个业务需求，需要从一个表中批量读取大量数据，然后保存到另一个表中。数据量会有几十万甚至几百万条。
初步设计通过spring的quatz来定时执行。
但是在复制的过程中，如何能够确保数据的一致性呢？
我自己想了几个方案，但是都不够满意，不知道有没有大牛能够解答？
...全文
相关推荐
mysql 海量数据的存储和访问解决方案
数据库水平切分的实现原理解析－－－分库，分表，主从，集群，负载均衡器
java与mysql日期类型的问题
java和mysql日期的问题。通过java向mysql中插入datetime类型的数据： String sql = "INSERT INTO wp_posts ( post_date ）VALUES(?)"; PreparedStatement pstmt = connection.prepareStatement(sql); Timestamp time = new Timestamp(System.currentTimeMillis()); pstmt.setTimestamp(1, time);
java实现两个mysql同步主库的数据
两个mysql数据库之间实现同步,通过定时任务实现从主库到从库的同步,java代码实现,所有java项目包括配置都有,数据结构可以跟据自己的特定情况去改
MySQL实现主从复制
mysql主(称master)从(称slave)复制的原理： 1、 master将数据改变记录到二进制日志(binary log)中,也即是配置文件log-bin指定的文件(这些记录叫做二进制日志事件，binary log events) 2、 slave将master的binary log events拷贝到它的中继日志(relay log) 3、 slave重做中继日志中的事件,将改变反映它自己的数据(数据重演)
MySQL 5.7主从复制
MySQL 5.7主从复制
