社区
新技术前沿
帖子详情
一个表一天百分条数据,如何提高查询?
you_tube
2009-05-25 05:55:04
加精
RT
...全文
727
61
打赏
收藏
一个表一天百分条数据,如何提高查询?
RT
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
61 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
yangangs
2009-05-27
打赏
举报
回复
很难啊,关注
you_tube
2009-05-27
打赏
举报
回复
[Quote=引用 57 楼 sparklerl 的回复:]
以周建分区表可以吧,千万级的数据查询应该没什么影响(当然要索引)
对需要统计的信息在服务器空闲时(比如凌晨)进行统计,并存储对应的统计信息,
在客户需要统计时可以直接调用或在已有统计信息的基础上再进行统计
(大体思想就这样的吧)
[/Quote]
关键这不是做统计用的,查询出来还搞了个游标执行一存储过程;Crazy!!!
you_tube
2009-05-27
打赏
举报
回复
[Quote=引用 60 楼 chaozi_249 的回复:]
mark,能多分几个表,就多分几个表。
[/Quote]
分区表已经建过了,,
sparklerl
2009-05-27
打赏
举报
回复
以周建分区表可以吧,千万级的数据查询应该没什么影响(当然要索引)
对需要统计的信息在服务器空闲时(比如凌晨)进行统计,并存储对应的统计信息,
在客户需要统计时可以直接调用或在已有统计信息的基础上再进行统计
(大体思想就这样的吧)
xiaoxiangqing
2009-05-27
打赏
举报
回复
数据量太大,最好是建分区.
chaozi_249
2009-05-27
打赏
举报
回复
mark,能多分几个表,就多分几个表。
rap815
2009-05-26
打赏
举报
回复
学习 支持
武哥博文
2009-05-26
打赏
举报
回复
首先,查询和插入分开
其次,插入的表上尽量不要索引,
此表单独放在一个数据库文件组中,此文件单独放在一个硬盘上以提高读写的效率
jamie_zheng
2009-05-26
打赏
举报
回复
学习来的,支持下下!
angelalien
2009-05-26
打赏
举报
回复
分区表就大大提高你的性能,另外,这种数据应该只把最近或最常用的放在当前服务器上
其它数据全部挪走.
一亿数据一个非分区表,还没有raid,还要频繁查询,你还让人活吧?
w15904772228
2009-05-26
打赏
举报
回复
DING
j2eeoriented
2009-05-26
打赏
举报
回复
dd
lgq19721219
2009-05-26
打赏
举报
回复
关注中
haitao
2009-05-26
打赏
举报
回复
区分表不算拆表,sql的使用还是像一个大表,只是系统自动到对应的小表去处理,所以效率高了
flairsky
2009-05-26
打赏
举报
回复
每天一张表嘛,做分区视图搞定
you_tube
2009-05-26
打赏
举报
回复
[Quote=引用 27 楼 perfectaction 的回复:]
楼主的情况最佳的作法是:
该表做分区表,理论上最多可以有1000个区. 查询条件中必须要分区列. 另外,这个最好要有raid,哪怕是raid5.
如果都作不到,那就把表中不常用的数据全部转移到其它备服务器,该服务器上只保留最新数据.
分区表需要企业版支持,如果不能分区,就拆表.
像那些月或周报表之类,凌晨跑作业来生成.
[/Quote]
现在只能拆表了
mdmzl
2009-05-26
打赏
举报
回复
学习!!!!!!!!
ld10552
2009-05-26
打赏
举报
回复
好东西
m60a1
2009-05-26
打赏
举报
回复
我也有这个同样的问题,现在有个表,每三秒就会有N条记录(至少大于百次请求),写入一个表中,一天下来那个表的量可想而知.
我一直很担心查询的速度,因为软件还没有正式发布,所以还没有具体看到查询速度有什么样的变化,由于是软件自带库,所以还
用的是ACCESS :( ,我顺便把我的这个问题,也提下,大家给个好点的解决方案!
nzperfect
2009-05-26
打赏
举报
回复
楼主的情况最佳的作法是:
该表做分区表,理论上最多可以有1000个区. 查询条件中必须要分区列. 另外,这个最好要有raid,哪怕是raid5.
如果都作不到,那就把表中不常用的数据全部转移到其它备服务器,该服务器上只保留最新数据.
分区表需要企业版支持,如果不能分区,就拆表.
像那些月或周报表之类,凌晨跑作业来生成.
加载更多回复(38)
MySQL入门精讲
在实际开发中,
数据
库的作用无法替代,无论是开发者还是测试者都需要掌握
数据
库操作的基本技能, 而实际工作中与
数据
打交道的工作
百分
之八十甚至更多都是在编写SQL做
查询
语句。本课程正是 由于这样的出发点,以MySQL...
Oracle大
数据
量分区后
查询
效率低下
场景描述: Oracle
数据
库中有2张
表
,一张是tm_bus_realtime_log当前
表
只有当前
一天
的
数据
。
数据
量有几百万的
数据
。还有一张
表
,tm_bus_realtime_his历史
表
进行了分区。每10天一分区,就是每个月有3个分区。整个历史
表
有几亿的
数据
量。每个分区有千万
条
数据
。问题描述: 在从历史
表
的分区中,
查询
数据
时,很慢,由于
数据
量非常大,如果想
查询
几天...
mysql
查询
前
百分
之几的
数据
(例如学生分数前25%)
数据
表
sql select @rownum:=@rownum+1,student.* from (select @rownum:=0) t1 , (select * from student order by student.grade desc) student ##排序 where @rownum<(select round(count(*)/4) from student) 结果 具体语句含义说明
sql
查询
百分
之20到
百分
之40的
数据
_
数据
工程指南高级技能:如何选择
数据
平台...
数据
工程指南:教大家如何成为优秀的
数据
工程师。在之前的文章中,我们探讨了入门知识和基础技能,接下来深入介绍高级技能。系列文章:《
数据
工程指南:初学者入门》《
数据
工程指南:基础技能》原文来源于Github开源项目《The Data Engineering Cookback》作者:Andreas Kretz感兴趣可以查看:Data Engineering Cookbook 为什么需要
一个
好的
数据
平台?...
万亿
条
数据
查询
如何做到毫秒级响应?
点击上方"IT牧场",选择"设为星标"技术干货每日送达!来源:itindex.net/我们的痛点系统架构要求勘探MySQL Sharding 和 MHA 的缺点什么是 TiDB?我们如何使用 TiDB我们架构中的 TiDBTiDB 的性能指标我们学到了什么更快地导入
数据
减少
查询
延迟评估资源对 TiDB 3.0 的期望下一步是什么知乎,在古典中文中意为“你知道吗?”,它是中国的 Quora,
一个
问答...
新技术前沿
6,129
社区成员
4,460
社区内容
发帖
与我相关
我的任务
新技术前沿
MS-SQL Server 新技术前沿
复制链接
扫一扫
分享
社区描述
MS-SQL Server 新技术前沿
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章