社区
MySQL
帖子详情
高难度问题:java mysql海量数据复制 一致性问题
pricks
2014-12-31 07:07:33
hi,伙伴们!
我有一个业务需求,需要从一个表中批量读取大量数据,然后保存到另一个表中。数据量会有几十万甚至几百万条。
初步设计通过spring的quatz来定时执行。
但是在复制的过程中,如何能够确保数据的一致性呢?
我自己想了几个方案,但是都不够满意,不知道有没有大牛能够解答?
...全文
219
3
打赏
收藏
高难度问题:java mysql海量数据复制 一致性问题
hi,伙伴们! 我有一个业务需求,需要从一个表中批量读取大量数据,然后保存到另一个表中。数据量会有几十万甚至几百万条。 初步设计通过spring的quatz来定时执行。 但是在复制的过程中,如何能够确保数据的一致性呢? 我自己想了几个方案,但是都不够满意,不知道有没有大牛能够解答?
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
3 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
rucypli
2015-01-03
打赏
举报
回复
insert into tb1 select * from tb2就是一个事物 可以保证数据一致
qq_25016305
2015-01-03
打赏
举报
回复
mysql事务处理
码无边
2015-01-02
打赏
举报
回复
mysql事务处理
一起进阶学习
JAVA
:
MySQL
海量
数据
存储与优化
一起进阶学习
JAVA
:
MySQL
海量
数据
存储与优化第一部分 分库分表实战及中间件1.1 背景介绍1.1.1 背景描述刚开始我们的系统只用了 单机
数据
库随着用户的不断增多,考虑到系统的高可用和越来越多的用户请求,我们开始...
(四)双写
一致性
:ES与
MySQL
数据
同步的直接同步与异步解决方案
(四)双写
一致性
:ES与
MySQL
数据
同步的直接同步与异步解决方案
mysql
海量
数据
查询/处理
mysql
海量
数据
查询/处理
Java
教程:Canal实现
Mysql
和ES
数据
同步
在实际开发中,为了保证
数据
的安全性和持久性, 所以,我们一般会把
数据
存储的
数据
库中, 比如
mysql
数据
库.但, 如果
数据
量比较大, 并且搜索业务比较多, 则需要使用ES来实现我们的搜索功能.而ES所实现的搜索, 需
分布式存储系统——《
MySQL
海量
数据
存储与优化》_分布式
海量
数据
的研发与调优
其核心思想是:使用41bit作为毫秒数,10bit作为机器的ID(5个bit是
数据
中心,5个bit的机器ID),12bit作为毫秒内的流水号,最后还有一个符号位,...因此,如果是双主或者多主,就会增加
MySQL
入口,提升了主库的可用性。
MySQL
56,940
社区成员
56,757
社区内容
发帖
与我相关
我的任务
MySQL
MySQL相关内容讨论专区
复制链接
扫一扫
分享
社区描述
MySQL相关内容讨论专区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章