关于处理巨量数据的问题

HelloTager 2007-08-07 05:40:41
当数据库中的记录几万甚至更多的时候,系统操作数据库的的时间越来越长。有什么方法可以改善这一问题,有没有什么好的技术或数据查询方式?请高手们指教。
...全文
415 9 打赏 收藏 转发到动态 举报
写回复
用AI写文章
9 条回复
切换为时间正序
请发表友善的回复…
发表回复
yepinjun 2007-09-13
  • 打赏
  • 举报
回复
终于找到组织了,原本在VC++区求助,现在转发到这里来,希望没人删啊!
小弟需要对大量数据进行统计分析,不但数据量很大,并且统计分析过程也有至少几十亿次的计算.算了下按照每套运算步骤耗时1秒的话至少需要51年.差点就晕死了.
数据基本呈二维表分布,或者可以转换成这个分布格式,但因为对数据的划分达到100的4次方并需要对每个划分的数据进行统计,如统计该划分的数据总量.
由于编程很菜,对数据库技术也不懂,所以希望各位大大帮帮忙.是否需要分布式编程?是否需要多线程编程?进行数据统计分析对数据库要求如何?是否已经有高人写出了这样的算法?希望各位大大能告诉小弟如上问题的答案.最好是C/C++/VC/VC.NET/VB语言,用别的我就可能看不懂了.
如果是可以使用现有的数据库技术,希望大大能讲详细点,因为我的数据是数据文件,并不是数据库结构的.
先谢谢了!
nextflying 2007-09-05
  • 打赏
  • 举报
回复
sacrefies 2007-08-21
  • 打赏
  • 举报
回复
MSSQL 在处理千万级数据的时候就已经力不从心了哈。。。就要求这样优化那样优化了哈。。。。
lhj_cn 2007-08-17
  • 打赏
  • 举报
回复
ORACLE
cime63 2007-08-15
  • 打赏
  • 举报
回复
千万数据用什么数据库最合适?mssql可以胜任的吧?

上亿的数据用什么数据库最合适?MSSQL这时还能不能胜任?
javaoaout 2007-08-14
  • 打赏
  • 举报
回复
至少千万以上才能说稍微数据有点多。
keke560 2007-08-10
  • 打赏
  • 举报
回复
海量数据都是以"千万"为单位的,上亿的数据才是真正的考验数据库性能
banditisp 2007-08-08
  • 打赏
  • 举报
回复
用BI吧
luoqun_ncs 2007-08-08
  • 打赏
  • 举报
回复
“几万”是用来形容微量数据的单词。你问题问的太泛泛,我只能说。自己找本数据库优化的书看看吧。

259

社区成员

发帖
与我相关
我的任务
社区描述
其他产品/厂家
社区管理员
  • 其他
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧