十万？百万？千万？
请有经验的能不能说一下，谢谢
-
等级
本版专家分：72结帖率 100% -
到底多少数据量需要考虑到数据库分库
十万？百万？千万？
请有经验的能不能说一下，谢谢展开阅读全文
-
等级
本版专家分：473051勋章
-
- 名人 2012年 荣获名人称号
-
- 榜眼 2010年 总版技术专家分年内排行榜第二
-
- 探花 2009年 总版技术专家分年内排行榜第三
-
-
进士
2013年 总版技术专家分年内排行榜第十
2011年 总版技术专家分年内排行榜第七
-
-
一般不考虑分库，保持数据库逻辑上的完整。
如果你同一个表中记录过多，则可以考虑用分区表来提高查询效率。
-
等级
本版专家分：473051勋章
-
- 名人 2012年 荣获名人称号
-
- 榜眼 2010年 总版技术专家分年内排行榜第二
-
- 探花 2009年 总版技术专家分年内排行榜第三
-
-
进士
2013年 总版技术专家分年内排行榜第十
2011年 总版技术专家分年内排行榜第七
-
-
分区又把这个概念推进了一步，它允许根据可以设置为任意大小的规则，跨文件系统分配单个表的多个部分。
分区的一些优点包括：
· 与单个磁盘或文件系统分区相比，可以存储更多的数据。
· 对于那些已经失去保存意义的数据，通常可以通过删除与那些数据有关的分区，很容易地删除那些数据。相反地，在某些情况下，添加新数据的过程又可以通过为那些新数据专门增加一个新的分区，来很方便地实现。
通常和分区有关的其他优点包括下面列出的这些。MySQL 分区中的这些功能目前还没有实现，但是在我们的优先级列表中，具有高的优先级；我们希望在5.1的生产版本中，能包括这些功能。
· 一些查询可以得到极大的优化，这主要是借助于满足一个给定WHERE 语句的数据可以只保存在一个或多个分区内，这样在查找时就不用查找其他剩余的分区。因为分区可以在创建了分区表后进行修改，所以在第一次配置分区方案时还不曾这么做时，可以重新组织数据，来提高那些常用查询的效率。
· 涉及到例如SUM() 和 COUNT()这样聚合函数的查询，可以很容易地进行并行处理。这种查询的一个简单例子如 “SELECT salesperson_id, COUNT(orders) as order_total FROM sales GROUP BY salesperson_id；”。通过“并行”， 这意味着该查询可以在每个分区上同时进行，最终结果只需通过总计所有分区得到的结果。
· 通过跨多个磁盘来分散数据查询，来获得更大的查询吞吐量。
http://dev.mysql.com/doc/refman/5.1/zh/partitioning.html
18. 分区
18.1. MySQL中的分区概述
18.2. 分区类型
18.2.1. RANGE分区
18.2.2. LIST分区
18.2.3. HASH分区
18.2.4. KEY分区
18.2.5. 子分区
18.2.6. MySQL分区处理NULL值的方式
- 数据库分库分表策略的具体实现方案
1、 使用Spring AOP实现MySQL数据库读写分离案例分析 2、MySQL5.6 数据库主从（Master/Slave）同步安装与配置详解 3、MySQL主从复制的常见拓扑、原理分析以及如何提高主从复制的效率总结 4、使用mysqlreplicate...
- MySQL数据库面试题（2020最新版）
文章目录数据库基础知识为什么要使用数据库什么是SQL？什么是MySQL?数据库三大范式是什么mysql有关权限的表都有哪几个MySQL的binlog有有几种录入格式？分别有什么区别？数据类型mysql有哪些数据类型引擎MySQL存储...
- 数据库分库分表思路及案例分析
当单表的数据量达到 1000W 或 100G 以后，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。 数据库分布式...
- 关于mysql数据库分库分表、事务一致性问题的学习
很多人张嘴就是分库分表，好像不分库分表就不算牛逼的系统，不谈分库分表就没有逼格一样。 个人觉得，在设备配置别太挫、业务拆分别太渣、sql写法别太low、单表数据不上亿的情况下，靠读写分离、索引优化、表分区等...
- 数据库分库分表，动态扩容缩容方案
昨天我们分享了怎么不停机进行分库分表数据迁移（数据库分库分表，生产环境不停机数据迁移）后来有好多朋友问我，说他们的系统虽然也到了差不多分表的地步了，但是，不知道具体拆分多少张表，分多了又怕浪费公司资源...
- 数据库如何分库分表
数据库架构演变 刚开始我们只用单机数据库就够了，随后面对越来越多的请求，我们将... 从库可以水平扩展，所以更多的读请求不成问题。 但是当用户量级上来后，写请求越来越多，该怎么办？加一个Master是不能解决问...
- 分布式数据库之分库分表总结
常见的数据库分库分表主要有基于基于应用层和基于分布式中间件两种方案。 基于应用层的实现方案直接连接数据库，额外开销少，但是应用入侵，不变后续扩展。需要应用主动进行数据库和表的路由，实现起来比较麻烦，...
- 别再问什么是数据库分库分表了，看这里！
编者语：为了避免被误解为：「手里有把锤子，看什么都是钉子！」，说明一下不是什么业务都...本文主要是通过几道关于分库分表的常问面试题带你深入了解数据库分库分表，希望对大家能够有所帮助！ 一：面试题 为什...
- 数据库性能提升之分库分表
一. 数据切分 关系型数据库本身比较容易成为系统瓶颈，单机存储...数据切分就是将数据分散存储到多个数据库中，使得单一数据库中的数据量变小，通过扩充主机的数量缓解单一数据库的性能问题，从而达到提升数据库操作性
- Mysql分库分表实战（一）——一文搞懂Mysql数据库分库分表
由于业务需要，需要对Mysql数据库进行分库分表，故而最近一直在整理分库分表的相关知识，现手上的工作也告一段落了，抽空将自己最近的学习结果转化为博文，分享给大家，本博文打算做成一个系列的，首先是分库分表的...
- 数据库水平分库分表后的数据分页查询解决方案
为什么要分库分表,水平与竖直的区别,这里就不讲述了,想了解的自行google 开门见山直接说解决方案: 分库分表的策略,依项目需求而定,这里采用的是常规的做法:根据取模的方式,假设我们水平分库2个,每个库又水平拆表2...
- 数据库分库分表
支付系统要处理每秒十万笔订单，需要的是每秒数十万的数据库更新操作（insert加update），这在任何一个独立数据库上都是不可能完成的任务，所以我们首先要做的是对订单表（简称order）进行分库与分表。 在进行...
- 数据库分库分表及MySQL主从复制实现数据库同步
一、为什么要分库分表 解决大数据存储时数据访问性能，具体来说就是解决超大容量问题和性能问题。 举例说明，订单表或用户表如果数据量达到上亿条记录...垂直分库：解决数据表过多问题，按照功能模块、业务维度、E...
- 怎么进行数据库分库分表？
当单表的数据量达到1000W或100G以后，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。 数据库分布式核心...
- 聊聊数据库分库分表策略
当一张表的数据达到千万级时甚至亿级时我们该如何设计？
- 数据库分库分表，何时分？怎样分？
当单表的数据量达到1000W或100G以后，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。 数据库分布式核心...
- oracle数据库学习之分布式数据库分库分表常见问题
1. 分库分表维度的问题假如用户购买了商品,需要将交易记录保存取来，如果按照用户的纬度分表，则每个用户的交易记录都保存在同一表中，所以很快很方便的查找到某用户的购买情况，但是某商品被购买的情况则很有可能...
- 数据库分库分表学习整理
关于数据库的学习，一个绕不过的东西就是数据库的分库分表，还是有必要总结一下，以后工作的时候会用到，面试的时候也会用到的。 1. 什么是数据库分表 关于分库分表字面理解就把原本存储在一个库一个表中的数据...
- 数据库分库分表之后如何查询统计？
数据库分库分表是缓解数据库服务器压力和增加并发量的途径之一，但是随着分库分表之后，也不可避免的带来了一些问题，很显而易见的问题就是如何解决分库后的查询统计。分库之后没有SQL可以用了，简单的过滤后再合并...
- 实战中，数据库应如何分库分表
数据库如何分库分表 首先说数据库的分库和分表是两个完全不同的概念。不能混为一谈。但是他们的作用基本上都是为了抗住更大的并发量。 因为在实际生产中，数据库的访问瓶颈是最大概率限制服务器并发性能的。 随着...
- 数据库分库分表(sharding)系列(一) 拆分实施策略和示例演示
本文着重介绍sharding切分策略，如果你对数据库sharding缺少基本的了解，请参考我另一篇从基础理论全面介绍sharding的文章：数据库Sharding的基本思想和切分策略 第一部分：...数据库分库分表(sharding)实施策略图解
- 数据库分库分表后，我们怎么保证ID全局唯一
采用了读写分离主从复制（数据库读写分离方案，实现高性能数据库集群）的方案去应对，后来又面临了大并发写入的时候，系统数据库采用了分库分表的方案（数据库分库分表方案，优化大量并发写入所带来的性能问题），...
- 数据库分区、分表、分库，读写分离
单库单表是最常见的数据库设计，例如，有一张用户(user)表放在数据库db中，所有的用户都可以在db库中的user表中查到。 ②.单库多表 随着用户数量的增加，user表的数据量会越来越大，当数据量达到一定程度的时候对...
- 数据库分库分表策略
作为一种数据存储层面上的水平伸缩解决方案，数据库Sharding技术由来已久，很多海量数据系统在其发展演进的历程中都曾经历过分库分表的Sharding改造阶段。简单地说，Sharding就是将原来单一数据库按照一定的规则进行...
- 数据库分区、分表、分库、分片
一、分区的概念 数据分区是一种物理数据库的设计技术，它的目的是为了在特定的SQL操作中减少数据读写的总量以缩减响应时间。 分区并不是生成新的数据表，而是将表的数据均衡分摊到不同的硬盘，系统或是不同服务器...
- Mysql学习总结（59）——数据库分库分表策略总结
一、为什么分库分表 我们知道每台机器无论配置多么好它都有自身的物理上限，所以当我们应用已经能触及或远远超出单台...因此，使用数据库的分库分表，能够立竿见影的提升系统的性能，关于为什么要使用数据库的分...
- 数据库分库分表策略和分库分表后数据的查询
在日常的工作中，关系型数据库本身比较容易成为系统的瓶颈点，虽然读写分离能分散数据库的读写压力，但并没有分散存储压力，当数据量达到千万甚至上亿时，单台数据库服务器的存储能力会成为系统的瓶颈，主要体现在...
- 数据库分库分表中间件对比（很全）
数据库（分库分表）中间件对比 分区：对业务透明，分区只不过把存放数据的文件分成了许多小块，例如mysql中的一张表对应三个文件.MYD,MYI,frm。根据一定的规则把数据文件(MYD)和索引文件（MYI）进行了分割，分区后...
- 数据库分库分表的应用场景及解决方案
数据库分库分表的应用场景及解决方案 现实业务场景中，为了保障客户体验并满足业务的线性增长。会对数据量巨大，且业务会始终进行的产品进行分表分库策略。但是如何合理的根据业务采取争取的分表分库策略至关重要...
- mysql数据库分库分表策略的具体实现方案
AOP实现MySQL数据库读写分离案例分析 2、MySQL5.6 数据库主从（Master/Slave）同步安装与配置详解 ：http://blog.csdn.net/xlgen157387/article/details/51331244 3、MySQL主从复制的常见拓扑、原理分析...