数据库太大，有按年月分别建库的搞法?

2014-12-04 09:47:01 271 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

人形机器人硬件开发：骨架系统设计全攻略本文以人形机器人骨架系统为核心研究对象，系统解析其从理论建模到工程实现的全流程设计方法。通过融合刚体力学、材料科学与机器人控制理论，构建"概念基础-理论框架-架构设计-实现机制-实际应用-高级考量-综合拓展"的七层分析体系。重点覆盖运动学/动力学建模、轻量化结构设计、关节模块集成、多物理场耦合优化等关键技术，结合波士顿动力Atlas、本田ASIMO等经典案例，提供从原型设计到量产验证的工程实践指南。阅读详情

我做的实时曲线，用的是sqlite，1s钟要保存一条记录，24小时运行，1年大概有3千多万记录，而且这个记录不能删除，用了索引，查询加limit是比较快，担心就是几年后数据太大，按年建库感觉太麻烦，程序中要加很多判断，不知道大家怎么处理？而且有几条曲线，一条曲线建个库？

...全文

MC1496乘法器AM调制电路搭建全流程（附Multisim 14.0仿真文件）本文提供了基于MC1496乘法器搭建AM调制电路的完整实战指南。针对仿真模型缺失的痛点，详细讲解了从晶体管级手动构建MC1496等效模型，到外围电路设计、调制度参数计算与调节，并在Multisim 14.0中进行仿真验证的全流程。通过深度剖析MC1496内部原理与AM信号调制机制，帮助读者获得从仿真到实践的可控设计与排错能力。阅读详情

tixisong

MySQL 57,062 成员 56,759 内容

+ 关注 + 加入社区

切换为时间正序

benluobo 2014-12-04

打赏
举报

你查询条件是c_time 索引是cool 和 c_time的联合，因为索引的前缀才能有效果，所以这个索引只能对cool查询或者两个条件一起的时候才会生效你可以将这个索引的字段换一下顺序或者再在c_time上单独建立索引

tixisong 2014-12-04

打赏
举报

引用 1 楼 benluobobo 的回复:

可以考虑对表按时间进行分区另外既然是实时曲线，应该不需要存储历史数据吧

就是要存储，以后看历史数据，像股票。


Table [t_tension]
    Fields: 3
        [id]: INTEGER
        [value]: real
        [c_time]: text
    Foreign Keys: 0
    Indexes: 1
        [cool]
            [c_time] 
    Triggers: 0
    Unique constraints: 0
    Check constraints: 0

这是我的表结构，索引为cool,c_time字段，可下面这句查询还是很慢，似乎索引没有起来到作用 select id,value,c_time from t_tension where datetime(c_time)>='2015-10-10 02:02:02' and datetime(c_time)<= '2015-10-10 02:10:00' limit 100;

benluobo 2014-12-04

打赏
举报

可以考虑对表按时间进行分区另外既然是实时曲线，应该不需要存储历史数据吧

ACMAIN_CHM 2014-12-04

打赏
举报

参考一下数据仓库的概念，把常用的数据，比如最近一个月的放在一个数据库中，一个月以上的记录放在另一个数据库中。

tixisong 2014-12-04

打赏
举报


表结构：
Table [t_tension]
    Fields: 3
        [id]: INTEGER
        [value]: real
        [c_time]: text
    Foreign Keys: 0
    Indexes: 1
        [cool]
            [c_time] 
    Triggers: 0
    Unique constraints: 0
    Check constraints: 0
表的数据：
id	value	c_time
1	41	     2014-12-04 08:59:30
1	467    2014-12-04 08:59:31
1	334	   2014-12-04 08:59:32
1	500	   2014-12-04 08:59:33
1	169	  2014-12-04 08:59:34
1	724	  2014-12-04 08:59:35
1	478	2014-12-04 08:59:36
1	358	2014-12-04 08:59:37
1	962	2014-12-04 08:59:38
1	464	2014-12-04 08:59:39
1	705	2014-12-04 08:59:40
1	145	2014-12-04 08:59:41
1	281	2014-12-04 08:59:42
1	827	2014-12-04 08:59:43
1	961	2014-12-04 08:59:44
1	491	2014-12-04 08:59:45
1	995	2014-12-04 08:59:46
.........

查询代码：
select id,value,c_time from t_tension where datetime(c_time)>='2015-10-10 02:02:02' and datetime(c_time)<= '2015-10-10 02:10:00' limit 100;

我反复测试发现，感觉sqlite对text排序太慢，虽然加了索引。结果把c_time 转成real类型，就是把时间转double存，再搜索，加索引与不加索引的差距就出来了。我不知道mysql数据库怎么样，若查询快的话我在考虑要不要换数据库

benluobo 2014-12-04

打赏
举报

贴出查询计划吧

tixisong 2014-12-04

打赏
举报

引用 3 楼 benluobobo 的回复:

你查询条件是c_time 索引是cool 和 c_time的联合，因为索引的前缀才能有效果，所以这个索引只能对cool查询或者两个条件一起的时候才会生效你可以将这个索引的字段换一下顺序或者再在c_time上单独建立索引

那个cool 是索引的名字，不是字段，c_time这个才是字段

数据库太大，有按年月分别建库的搞法?

相关推荐