但客户端程序若要访问，则如何处理？一般的处理方法是怎么样的。
当表很多的时候，则如何处理？
请发表你的意见。
-
等级
本版专家分：11913结帖率 100% -
若一个表中有2000万，10年的数据，一般处理方法是将不常用的数据导入到历史表中。
但客户端程序若要访问，则如何处理？一般的处理方法是怎么样的。
当表很多的时候，则如何处理？
请发表你的意见。展开阅读全文
-
等级
本版专家分：214223勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
- 状元 2014年 总版技术专家分年内排行榜第一
-
- 榜眼 2013年 总版技术专家分年内排行榜第二
-
-
金牌
2014年8月 总版技术专家分月排行榜第一
2014年7月 总版技术专家分月排行榜第一
2014年6月 总版技术专家分月排行榜第一
2014年5月 总版技术专家分月排行榜第一
2014年4月 总版技术专家分月排行榜第一
2014年3月 总版技术专家分月排行榜第一
2014年1月 总版技术专家分月排行榜第一
2013年12月 总版技术专家分月排行榜第一
-
-
1、如果是2005及以上版本，通常可以用分区表来归档，每年一个区，用户看上去还是一个表，但是物理存储方面是分开了。不过分区表有很多注意事项。需要评估和测试才能用。
2、如果不想用分区表，就拆实体表，每年一个，然后用视图把数据Union all起来。
3、2000万数据目前的系统来说，只要不是频繁返回大量数据，秒杀是没问题的
-
等级
本版专家分：3176 -
如果前台应该不能改,估计只能用分区表了.
如果前台应该可以改,一个当前表,一个历史分区表.
-
等级
本版专家分：1180 -
以前都是每年一个表归档的，查询用union
-
等级
本版专家分：84249勋章
-
- 金牌 2014年2月 总版技术专家分月排行榜第一
-
-
银牌
2014年1月 总版技术专家分月排行榜第二
2013年12月 总版技术专家分月排行榜第二
-
- 优秀版主 2016年10月优秀小版主
-
- 微软MVP 2014年4月 荣获微软MVP称号
-
-
如果是老版本的2000，可以使用视图来实现。
如果是2005及以上的版本，那么可以直接使用 分区表，这样可以考虑不用吧历史数据放到历史表中，同时也不影响当前业务。
- java复习
1． 关于动态加载机制?? 学习Java比C++更容易理解OOP的思想，毕竟C++还混合了不少面向过程的成分。... 提供大家一个方法： 在命令行窗口运行Java程序的时候，加上这个很有用的参数： java ?verbose *.class 这样会清...
- 【IT项目管理】第7章 习题
保证项目质量习题 一、单选题二、案例分析题 一、单选题 1．卖方刚刚提交新计算机调制项目的实验结果。结果表明项目不满足总体质量要求。如果项目经理与团队成员一起分析问题，则项目经理正在进行的工作是：（ B ...
- 数据挖掘
数据挖掘 目录 什么是数据挖掘 数据挖掘的起源 数据挖掘能做什么 数据挖掘中的关联规则 数据挖掘技术实现 数据挖掘与数据仓库融合发展 什么是数据挖掘 数据挖掘(Data Mining)...
- MySQL数据库面试题（2020最新版）
数据类型mysql有哪些数据类型引擎MySQL存储引擎MyISAM与InnoDB区别MyISAM索引与InnoDB索引的区别？InnoDB引擎的4大特性存储引擎选择索引什么是索引？索引有哪些优缺点？索引使用场景（重点）...
- 数据中台，什么是数据中台？
数据中台被誉为大数据的下一站，由阿里兴起，核心思想是数据共享，并在 2018 年因为“腾讯数据中台论”再度成为了人们谈论的焦点。在 3 月 15 日 ThoughtWorks 技术雷达峰会上，关于数据中台的话题也获得了众多参会...
- 大数据量下高并发同步的解决方案
大数据量下高并发同步的讲解（不看，保证你后悔） 对于我们开发的网站，如果网站的访问量非常大的话，那么我们就需要考虑相关的并发访问问题了。而并发问题是绝大部分的程序员头疼的问题， 但话又说回来了...
- 浅谈数据监控&数据分析
从广义来讲，数据是反映产品和用户状态最真实的一种方式，通过数据指导运营决策、驱动业务增长。数据可分为2种情况：数据监控和数据分析。 什么是数据监控？ 数据监控是及时、有效的反馈出数据异常的一种手段，通过...
- Apache ShardingSphere数据脱敏全解决方案详解(下)
ApacheShardingSphere数据脱敏全解决方案详解(下)作者介绍潘娟，京东数科高级DBA，主要负责京东数科数据库中间件开发、数据库运维自动化平台开发、生产数据...
- 浅谈制造业主数据项目解决方案
在中国制造2025战略决策的指引下，制造业都在智能制造领域探索自身的发展路径，希望能够跟上数据发展的浪潮，以数据驱动业务快速提升企业竞争力。那么面对企业海量数据，如何找到数据管理的切入点呢？分析近些年我所...
- 动态再平衡投资策略历史数据回测
谈赚钱，就会谈到理财、投资，谈到炒股。有这样一个笑话：问：如何成为百万富翁？答：带一千万进入股市。那么你有没有炒过股？有没有亏过钱？股市虽然是个充满造富神话的地方，但对于大部分参与者来说，风险都是极高...
- 从小蝌蚪找妈妈谈“机器学习VS数据挖掘”
大家都热衷于机器学习、数据挖掘这么时髦的名词时，会否认为基于统计学的数据分析技术已经过时？从小蝌蚪找妈妈这个故事里能否都出关于机器学习的些许启示？现在五花八门，名字听起来很吓人的各种模型是否真的能够...
- 大数据时代下的海量数据存储技术有哪些？
例如：前端IPC有130W到500W像素，码流也从有2Mbps到8Mbps，而一个130W像素，8Mbps码流的前端，录像一个月就需要2531.3GB，数据量不可小觑。 存储周期方面，现在也有了政府的有力推动。对当前整个安防市场来讲，特别...
- 前端面试题
前端面试题汇总 ... 你做的页面在哪些流览器测试过？这些浏览器的内核分别是什么? 21 ... 21 Quirks模式是什么？它和Standards模式有什么区别 21 div+css的布局较table布局有什么优点？...img的alt与title有何异同？...
- 浅谈数据挖掘与机器学习
引言在大多数非计算机专业人士以及部分计算机专业背景人士眼中，机器学习(Data Mining)以及数据挖掘(Machine Learning)是两个高深的领域。在笔者看来，这是一种过高”瞻仰“的习惯性错误理解（在这里我加了好多定语...
- 大数据量下高并发同步的讲解(高并发的瓶颈-需要处理的内容)
对于我们开发的网站，如果网站的访问量非常大的话，那么我们就需要考虑相关的并发访问问题了。而并发问题是绝大部分的程序员头疼的问题， 但话又说回来了，既然逃避不掉，那我们就坦然面对吧~今天就让我们一起来研究...
- 大数据的一生一世——谈数据冷热分离技术
本文探讨了大数据冷热分离的诸多解决方案，包括冷热分离异构系统、冷热分离同构系统。
- MADlib——基于SQL的数据挖掘解决方案（1）——数据挖掘入门
一、什么是数据挖掘 数据挖掘（Data Mining），也叫数据开采、数据采掘等，是从大量的、不完全... 从上述定义可见数据挖掘明显有别于传统数据处理技术（如事务处理，OLTP）。首先数据挖掘面对的是大量的不完全的数据
- Java高并发，如何解决，什么方式解决
对于我们开发的网站，如果网站的访问量非常大的话，那么我们就需要考虑相关的并发访问问题了。而并发问题是绝大部分的程序员头疼的问题， 但话又说回来了，既然逃避不掉，那我们就坦然面对吧~今天就让我们一起来研究...
- 肖仰华谈知识图谱：知识将比数据更重要，得知识者得天下
肖仰华谈知识图谱：知识将比数据更重要，得知识者得天下 https://mp.weixin.qq.com/s?__biz=MzI0ODcxODk5OA==&mid=2247498869&idx=1&sn=4e69bb2f27dd1289effe864551ca0bbe&...
- 再谈Spark下写S3文件的File Output Committer问题
本文回顾了Spark写文件的机制，探讨了AWS EMRFS S3-optimized Committer的工作原理、存在的数据一致性问题以及如何解决。
- Java高并发，如何解决，什么方式解决1
对于我们开发的网站，如果网站的访问量非常大的话，那么我们就需要考虑相关的并发访问问题了。而并发问题是绝大部分的程序员头疼的问题， 但话又说回来了，既然逃避不掉，那我们就坦然面对吧~今天就让我们一起来...
- 数据中台已成下一风口，它会颠覆数据工程师的工作吗？
数据中台已成下一风口，它会颠覆数据工程师的工作吗？ 原创： 史凯 AI前线 昨天 采访嘉宾｜史凯 整理｜Natalie 编辑｜Debra AI 前线导读：数据中台被誉为大数据的下一站，由阿里兴起，核心思想是数据共享，并在 2018...
- 数据分析，如何解决复杂的企业问题
很多同学表示：从0到1的文章很多，可面对复杂问题，该怎么搭建数据分析思路呢？首先，“复杂”一词在不同等级的数据分析师里含义不同。对小白而言，领导传达命令的时候，有“模型”俩字的就是复杂问...
- 再谈tcp流式传输和udp数据报传输------大家顺便来做做这两个题目！
我的书算是白读了， 这个问题居然是我在工作后才明白的。 我不能怪老师没有讲清楚， 我只能认为自己没有好好学习。 计算机网络这门课， 真是个枯燥无比的东西， 至少我是这么觉得的。 当年在大学时， 貌似是选修课...
- 人人都在谈的 “数据驱动” 到底是什么？你确认自己做的是数据驱动吗？
导读：移动互联网技术的快速发展，移动终端的广泛普及，催生了大数据技术。今天，无论是个人的日常生活，还是企业的业务发展，都和数据密切相关，大数据技术正成为新发明、新产品和新...
- 深入浅出谈数据挖掘
本文对数据挖掘概念的产生，数据挖掘与常规数据分析的主要区别，所能解决的几大类问题和所应用的领域都有着非常清晰的论述。作者在此篇文章中认为数据挖掘最重要的要素是分析人员的相关业务知识和思维模式。丰富的...
- java web开发高并发系列之——大数据量下高并发同步的讲解
对于我们开发的网站，如果网站的访问量非常大的话，那么我们就需要考虑相关的并发访问问题了。而并发问题是绝大部分的程序员头疼的问题， 但话又说回来了，既然逃避不掉，那我们就坦然面对吧~今天就让我们一起来...
- 我在滴滴数据分析岗实习了8个月
作者介绍：双非院校刚毕业的统计硕士，目前在滴滴工作，有8个月的数据分析实习经历，面试过10位以上数据分析实习生，最终成为了产品经理。 两个主题 本文的主要目标是帮助一些刚入门的同学了解互联网公司中...
- 【个推CTO谈数据智能】之数据安全计算体系
前三篇文章（《数据智能时代来临：本质及技术体系要求》《多维度分析系统的选型方法》《我们理解的数据中台》分别阐述了数据智能体系构建的技术要求，对团队工作中涉及到的多维度分析系统的选型方法进行了穿插介绍，...
- 关于数据中台、数据平台、数据仓库、数据湖等数据概念的对比解析
2010年左右，还是在上学的时候，学过一门课程叫《数据仓库与数据挖掘》，那还是属于传统数据的时代，我们会讨论什么是数据仓库？什么是数据集市？数据仓库和数据库有什么区别？等等，当我还在苦苦学习这些之时，...