一个表保存临时数据(如7天数据)，超出部分删除处理掉，数据量比较大，应该怎么处理？

aiq 2010-03-04 03:00:20

一个表，每天有20万的新数据，新数据是在一天中随着业务不断增加(晚上也有)的，我想只保存7天，超出的部分怎么删除处理掉？
有好的方法吗

...全文

146 7 打赏收藏转发到动态举报

写回复

用AI写文章

7 条回复

切换为时间正序

请发表友善的回复…

发表回复

iqlife 2010-03-04

打赏
举报

用不上太久的,几分钟
http://www.eygle.com/archives/2005/04/oracleoeouaeeae.html
这篇文章里介绍的,好像和你的很类似,

小灰狼W 2010-03-04

打赏
举报

20万数据不算太大吧
建7张表：周一到周日
删除不需要的记录直接truncate 表，删除一天的记录
然后再对该表插入当天的数据
我觉得这样比较快

aiq 2010-03-04

打赏
举报

有的，每天删除20万，很慢吧

iqlife 2010-03-04

打赏
举报

你的表没有时间字段>?根据时间字段去删除......

aiq 2010-03-04

打赏
举报

上面说错了，每天20万，大概140万的数据

aiq 2010-03-04

打赏
举报

我就是想知道怎么处理掉，7天，每天大概140万，从中间去掉最早一天的20万，怎样最快

iqlife 2010-03-04

打赏
举报

JOB处理,每天自动检查超过7天的数据,处理掉

在MySQL中有三种虚拟表：临时表、内存表、视图。下面简单介绍一下临时表和内存表的使用。1、临时表MySQL临时表在我们需要保存一些临时数据时是非常有用的。临时表在MySQL 3.23版本中添加。临时表只在当前连接可见，当关闭连接时，Mysql会自动删除表并释放所有空间。如果你使用了其他MySQL客户端程序连接MySQL数据库服务器来创建临时表，那么只有在关闭客户端程序时才会销毁临时表，当然你也可...

原文：zh.annas-archive.org/md5/622C4EC47FAAB3CE38900F0C3C942E11 译者：飞龙协议：CC BY-NC-SA 4.0 前言本书介绍了与企业中使用的大数据相关的广泛主题。大数据是一个广阔的领域，涵盖了技术、统计、可视化、商业智能以及许多其他相关学科的要素。为了从数据中获得真正的价值，通常由于数据量或技术限制而无法访问，公司必须在软件和硬件层面上利用适当的工具。因此，本书不仅涵盖了大数据的理论和实践方面，还通过高层次的主题，如企业中的大数据使用、大数

1、早期关系型数据库之间的数据同步 1）、全量同步比如从oracle数据库中同步一张表的数据到Mysql中，通常的做法就是分页查询源端的表，然后通过 jdbc的batch 方式插入到目标表，这个地方需要注意的是，分页查询时，一定要按照主键id来排序分页，避免重复插入。 2）、基于数据文件导出和导入的全量同步，这种同步方式一般只适用于同种数据库之间的同步，如果是不同的数据库，这种方式可能会存在问题。 3）、基于触发器的增量同步增量同步一般是做实时的同步，早期很多数据同步都是基于关系型

第一部分数据系统基础第1章可靠、可扩展与可维护的应用系统当今许多新型应用都属于数据密集型，而不是计算密集型。对于这些类型应用，CPU的处理能力往往不是第一限制性因素，关键在于数据量、数据的复杂度以及数据的快速和多变性。数据密集型应用系统设计也是基于标准模块构建而成的，通常包含以下模块：数据库：用以存储数据，之后应用可以再次访问高速缓存：缓存那些复杂或操作代价高昂的结果，以加快下一次访问索引：用户可以按关键字搜索数据并支持各种过滤流式处理：持续发送消息至另外一个进程，处理通常采用异步方式

以 AGGREGATE KEY 数据模型为例进行说明。更多数据模型参阅 Doris 数据模型。列的基本类型，可以通过在 mysql-client 中执行 HELP CREATE TABLE;查看。AGGREGATE KEY 数据模型中，所有没有指定聚合方式（SUM、REPLACE、MAX、MIN）的列视为 Key 列。而其余则为 Value 列。Key 列必须在所有 Value 列之前。尽量选择整型类型。因为整型类型的计算和查找比较效率远高于字符串。

Oracle 高级技术

3,497

社区成员

18,709

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章