社区
Oracle 高级技术
帖子详情
如果我要存2亿条数据,采用啥方法好呢?
flyycyu
2006-04-18 11:49:01
如果我要存2亿条数据,采用啥方法好呢?
是采用分区,还是多个服务器,数据比较简单,简单表,大家有什么好的意见
...全文
496
11
打赏
收藏
如果我要存2亿条数据,采用啥方法好呢?
如果我要存2亿条数据,采用啥方法好呢? 是采用分区,还是多个服务器,数据比较简单,简单表,大家有什么好的意见
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
11 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
DragonBill
2007-04-12
打赏
举报
回复
分区表
tgm78
2007-04-11
打赏
举报
回复
按照时间分区吧
skystar99047
2007-04-11
打赏
举报
回复
分区表即可。
baojianjun
2007-04-11
打赏
举报
回复
分区最好是一日期为区别
ljc007
2007-04-11
打赏
举报
回复
分区表
flyycyu
2007-04-04
打赏
举报
回复
hi
sanoul
2006-04-20
打赏
举报
回复
分区表
hevin
2006-04-19
打赏
举报
回复
如果是查询,当然是多个服务器,做集群
kingofworl
2006-04-19
打赏
举报
回复
先根据大的条件分多表,每个表分区
aiirii
2006-04-18
打赏
举报
回复
条件不足,如果主要是查询,那用 采用分区存储应该就可
skytears
2006-04-18
打赏
举报
回复
具备分区条件的话就分区
mysql一张表100
亿条
数据
_一个表有100
亿条
记录,如何优化
我们的
数据
库还在设计阶段。我们预计
数据
量将会很大,一年的时间里,一张表,就会产生100
亿条
数据
,表结构,如下id,userid,createddate,等等正常情况下,100
亿条
记录如果都
存
在一个表里,那么如果通过userid来查寻一定很慢。所以,请教各位在查询的性能优化上,表结构,
数据
库结构,有什么好的建议,用mysql实现,是否合适?提示,业务需求中的一个特性是:每个用户都有一个userid,...
MongoDB
数据
量大于2亿后遇到的问题 及原因分析
MongoDB
数据
量大于2亿后遇到的问题 及原因分析 一、
数据
增长情况 每月增长量最大达到了1.9亿,每天增长约300W-500W (增长
数据
具体可看页尾) 二、遇到的情况及解决
方法
1.
数据
量过大,并且都集中在一个表,所以此表
数据
插入变慢。 表索引越多越明显, 优化处理
方法
:
每天有1
亿条
记录的DB储
存
,MySQL
数据
库如何设计?
用Java怎么实现有每天有1
亿条
记录的DB储
存
?MySQL上亿记录
数据
量的
数据
库如何设计? 1.这么大
数据
量首先建议 使用大
数据
的DB,可以用spring batch 来做类似这样的处理。定量向DB
存
储
数据
。如果需要定时,可以考虑 quartz。 Mysql
数据
库设计: 1.读写分离; 2.纵向横向拆分库、表。 MySQL的基本功能中包括replication(复制)功能。所谓replicat...
用JAVA如何实现每天1
亿条
记录的
数据
存
储,
数据
库方面怎么设计?
一天秒数:60*60*24=86,400秒每天写入
数据
量:100,000,000条平均每秒写入
数据
量:100,000,000/86,400=1157.5条峰值每秒估算写入数:1157.5*10=11575条因此建议从以下几个层面处理1、
数据
库服务器磁盘
采用
高速SSD磁盘2、
数据
库
采用
2个节点的集群方式部署,每个集群节点3台服务器,1主2备,主
数据
库为写
数据
库,备
数据
库为读
数据
,
采用
读写分离,单集群...
1
亿条
数据
批量插入 MySQL,哪种方式最快
这几天研究mysql优化中查询效率时,发现测试的
数据
太少(10万级别),利用 EXPLAIN 比较不同的 SQL 语句,不能够得到比较有效的测评
数据
,大多模棱两可,不敢通过这些
数据
下定论。所以通过随机生成人的姓名、年龄、性别、电话、email、地址 ,向mysql
数据
库大量插入
数据
,便于用大量的
数据
测试 SQL 语句优化效率。、在生成过程中发现使用不同的
方法
,效率天差万别。下图一共三千三百万
数据
:在
数据
量在亿级别时,别点下面按钮,会导致Navicat持续加载这亿级别的
数据
,导致电脑死机。~觉着自己电脑配置不
Oracle 高级技术
3,497
社区成员
18,710
社区内容
发帖
与我相关
我的任务
Oracle 高级技术
Oracle 高级技术相关讨论专区
复制链接
扫一扫
分享
社区描述
Oracle 高级技术相关讨论专区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章