社区
疑难问题
帖子详情
SQL2000 海量数据 【欢迎大家来讨论】
指间、魔法师
2010-01-15 03:34:45
最近开发一个电子警察系统,有个很现实的问题。每天都有3~4万数据插入到一张表中。要是这样算哈,100天就有3~4百万的数据了。请问大家,关于这么大的数据量是如何处理的?
...全文
294
27
打赏
收藏
SQL2000 海量数据 【欢迎大家来讨论】
最近开发一个电子警察系统,有个很现实的问题。每天都有3~4万数据插入到一张表中。要是这样算哈,100天就有3~4百万的数据了。请问大家,关于这么大的数据量是如何处理的?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
27 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
指间、魔法师
2010-02-04
打赏
举报
回复
感谢大家。分数不多,分不到。不好意思。
祝大家新年快乐
华芸智森
2010-01-31
打赏
举报
回复
纵向按日期分区.而且,要依据你的硬盘数.
如有 HD1,HD2,HD3,HD4 几块硬盘.
那分区方案应该这样.假设置你的数据从 2001 年开始.
HD1,2001
HD2,2002
HD3,2003
HD4,2004
HD1,2005
HD2,2006
HD3,2007
HD4,2008
.....
依次类推....
当然,还可以你业务常用查询区间来分.
也可以考虑历史表和业务表结合的方案.
如一个大表,里面放的都是历史表,当前表存放一个月数据,在月底时将当前表导入历史表,清空业务表 等.
历史表要每月整理一次主键和索引.
亮剑_
2010-01-30
打赏
举报
回复
[Quote=引用 5 楼 orchidcat 的回复:]
涉及的方面挺多的:
1、Cluster Index肯定是要好好考虑的。
2、历史数据归档也是要考虑的。分区表还是人工手动处理等等。
3、硬件支持也是要考虑的因素。
4、另外每日的备份机制也要优先考虑好。
具体上述4项,如何处理,坛子里面精华可以找到。参考,针对自己的情况选择一下吧!
[/Quote]
备份机制建议选用基于硬件的自动化高可用性方案,人工备份为辅,否则DBA要杀人的
另外,灾备也是要考虑的问题
feixianxxx
2010-01-30
打赏
举报
回复
up
fcuandy
2010-01-27
打赏
举报
回复
事务表和仓库表的设计。
Q315054403
2010-01-26
打赏
举报
回复
每天三四万数据算比较少。。。有偿专业支持,持续后期跟进
fuwulong
2010-01-26
打赏
举报
回复
关注 还没有遇到过这么大的数据量的情况 很想学习这方面的经验,不管软件还是硬件! 谢谢大家 还望不能赐教!
lymmingv
2010-01-26
打赏
举报
回复
要看结构复杂程度,已经查询频度。如果很多张表,可以做个多维数据集,表少的话,比如2,3张的话,可以按月或3个月分表,1个表并且查询不频繁的话,按年分表也行,因为数据量不大,而且硬件又好。。。
feixianxxx
2010-01-26
打赏
举报
回复
up
clxsl_huang
2010-01-26
打赏
举报
回复
帮顶
王向飞
2010-01-26
打赏
举报
回复
你可以做分表啊
程序在查询的时候用一个视图
只需修改视图就好了
lmc19860810
2010-01-26
打赏
举报
回复
帮顶
指间、魔法师
2010-01-21
打赏
举报
回复
[Quote=引用 12 楼 like0112 的回复:]
这样的数据量确实不算很大,我也遇到过这种情况
采用分表就能解决问题,而且性能上也有保障
[/Quote]
额 能详细说说不?对数据库的建立,有什么要求?
ben_key01
2010-01-21
打赏
举报
回复
1,做好相应的INDEX,最好不要超过三个索引
2,采取年月作表名,一月一份表。
ziping
2010-01-20
打赏
举报
回复
建议分表
qq308993784
2010-01-19
打赏
举报
回复
帮你顶!
指间、魔法师
2010-01-19
打赏
举报
回复
么人。。
like0112
2010-01-19
打赏
举报
回复
这样的数据量确实不算很大,我也遇到过这种情况
采用分表就能解决问题,而且性能上也有保障
指间、魔法师
2010-01-18
打赏
举报
回复
来人啊。。~~
指间、魔法师
2010-01-15
打赏
举报
回复
感谢大家的到访。
硬件问题应该不会太大,别人好歹是个政府机关。
就是不知道如何实现数据备份好。
加载更多回复(7)
SQL
Server
海量
数据
优化
/****************************************************************************... *主题:
SQL
Server
海量
数据
优化 *说明:本文是个人学习的一些笔记和个人愚见 * 有很多地方你可能觉得有异议,
欢迎
一起
讨论
SQL
海量
数据
查询的优化手段
SQL
海量
数据
查询的优化手段 2010-02-02 13:36 101人阅读 评论(0) 收藏 举报 一、因情制宜,建立“适当”的索引 建立“适当”的索引是实现查询优化的首要前提。 索引(index)是除表之外另一...
SQL
Server
海量
数据
处理 - 2 改善
SQL
语句
很多人不知道
SQL
语句在
SQL
SERVER中是如何执行的,他们担心自己所写的
SQL
语句会被
SQL
SERVER误解。比如: select * from table1 wherename='zhangsan' and tID > 10000 和执行: select * from table1 where tID...
SQL
海量
数据
读写性能优化
这是给某
数据
中心做的一个项目,项目难度之大令人发指,这个项目真正的让我感觉到了,商场如战场,而我只是其中的一个小兵,太多的战术,太多的高层之间的较量,太多的内幕了。具体这个项目的情况,我有空再写相关的...
sql
2000
海量
数据
库的查询优化及分页算法
探讨如何在有着1000万条
数据
的MS
SQL
SERVER
数据
库中实现快速的
数据
提取和
数据
分页。以下代码说明了我们实例中
数据
库的“红头文件”一表的部分
数据
结构: CREATE TABLE [dbo].[TGongwen] ( --TGongwen是红头文件...
疑难问题
22,209
社区成员
121,730
社区内容
发帖
与我相关
我的任务
疑难问题
MS-SQL Server 疑难问题
复制链接
扫一扫
分享
社区描述
MS-SQL Server 疑难问题
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章