[开源广告]深受MySQL查询速度缓慢的项目经理和程序员看过来

影子传说_Hades 2014-03-06 03:33:09
首选说明,项目借鉴和使用了阿里Canal开源项目部分代码

工程目标:
实时同步数据,同机房千兆网络5k tps的延迟在ms级别
解决海量数据MySQL查询缓慢,经常死锁等普遍问题
解决MongoDB没有跨行事务问题
实现业务写MySQL,读MongodB,来实现业务事务完整,海量快速查询
MySQL到Mongodb增量数据同步功能实现
(该工程也支持从Mongodb到Mongodb的增量同步功能)
工程借鉴阿里Canal工程,在此表示感谢agapple

工程介绍:
该工程为数据视图大项目的一个子项目,各个业务mysql导入到中间mongodb后,后面可以选择数据组装工程进行分析或者组装形成大报表或者大视图。

业务查询可以直接查询该工程形成的中间库,也可以查询组装后的大视图

伪装MySQL从库,实时同步业务MySQL增量数据到MongoDB中间库中
伪装Mongo Second 或者slave,实时同步业务Mongo增量数据到MongoDB中间库中

工程源代码:
https://github.com/ppm10103/MySQLJavaBinlogReplicater.git
...全文
3481 8 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
8 条回复
切换为时间正序
请发表友善的回复…
发表回复
影子传说_Hades 2014-03-21
  • 打赏
  • 举报
回复
引用 4 楼 huxiweng 的回复:
看了下,就这样的文档估计没人看没人用
有个部署文档,是不是还要写个设计文档
影子传说_Hades 2014-03-21
  • 打赏
  • 举报
回复
引用 5 楼 raon0414 的回复:
文档是有点太简单了,多完善一下。大家都有这样需求的,支持!!!
影子传说_Hades 2014-03-19
  • 打赏
  • 举报
回复
可以直接部署,系统不需要人工干预的
raon0414 2014-03-17
  • 打赏
  • 举报
回复
文档是有点太简单了,多完善一下。大家都有这样需求的,支持!!!
影子传说_Hades 2014-03-15
  • 打赏
  • 举报
回复
居然没人接分?神奇了
teemai 2014-03-15
  • 打赏
  • 举报
回复
看了下,就这样的文档估计没人看没人用
影子传说_Hades 2014-03-12
  • 打赏
  • 举报
回复
居然没人接分?神奇了
影子传说_Hades 2014-03-11
  • 打赏
  • 举报
回复
居然没人接分?神奇了

23,409

社区成员

发帖
与我相关
我的任务
社区描述
Java 非技术区
社区管理员
  • 非技术区社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧