C++高速数据缓存设计方案

dreamlins 2008-03-18 10:42:16

小弟正用c++设计一个数据输入输出的接口，从数据库中取出数据给用户使用，及更新数据库的表记录，现需要一个高速数据缓存区，即先把数据库记录取出，缓存在本地。供用户快速使用，寻求高效解决方案。谢谢!

...全文

955 31 打赏收藏举报

写回复

31 条回复

切换为时间正序

请发表友善的回复…

发表回复

那一年我们21 2012-08-03

打赏
举报

[Quote=引用 10 楼的回复:]
to: Supper_Jerry
hashmap是高效，但查询条件很局限

to: laolaoliu2002
Memorycache是java里面的吧？c++里怎用?
[/Quote] 你做好的能否给我看看谢谢你了我的QQ1013453044 麻烦你了

那一年我们21 2012-08-03

打赏
举报

xkyx_cn 2008-07-16

打赏
举报

数据库记录量？
用户量？
用户身份？
……

supercow 2008-07-16

打赏
举报

应该个有个优化的策略吧.
可以在用户读取数据前根据用户身份判断可能取到的数据,来进行优化. 不过楼主没说这些细节~~

hai040 2008-07-16

打赏
举报

mark
可以考虑用内存数据库

yumei20001 2008-07-16

打赏
举报

首先SQl 语句就得先优化

也可以用个本地库来存放数据

zhengxianglei 2008-07-16

打赏
举报

不是太懂。看看看看~

jianmuyan 2008-07-16

打赏
举报

顶

Vitin 2008-07-16

打赏
举报

做项目建议配置数据库或者使用内存数据库。

如果是做研究，建议自己设计微型的内存数据库：
1、用大块内存存储连续数据记录，使用索引提高查询速度。
2、降低读写真实数据库的次数，批量读取与更新。
3、确定操作接口，根据需求决定设计。

Vitin 2008-07-16

打赏
举报

数据库管理系统一般都有自己的高速缓存。在内存足够的前提下通过合适的配置可以大大提高性能。

另外还有名为“内存数据库”的技术，提供基于内存的整套数据库解决方案。

sandrowjw 2008-07-16

打赏
举报

首先如果对地址重新编码的话，访问就不是问题，但是那样要重载整个内存管理层。
还有我感觉这种问题没有通用方案，最好是分析你的代码，找到内存分配效率上的瓶颈然后加以解决。数据库本身就有缓存机制，但是缓存的作用与否和数据库的设计优劣关系很大，所以与其动脑筋去考虑缓存，不如优化一下数据库设计（如果你用的Access就当我没说）。

逸学堂 2008-07-16

打赏
举报

排出其他问题

你可以看看memcached，很多大型网站都使用它做缓存（如果缓存命中率不能达到90%，最好别用）
http://danga.com/memcached/

另外：lz还是仔细分析一下影响性能的主要因素吧。

Dancing_Sea 2008-03-31

打赏
举报

不要说hashmap没有用
你将你的查询条件作为key，vector 里面的索引号作为value.

具体还是要看你的查询原则.

艾，还是废贴

Dancing_Sea 2008-03-31

打赏
举报

[Quote=引用 15 楼 taodm 的回复:]
查找规则都没谈，只能说是废贴。
[/Quote]

就是

楼主最好描述清楚你的数据是如何使用的，数据规模，用户查询、提交的频度

1、可以建立索引（跟数据库的索引类似），这样你可以将高速索引放到内存中，其他的放到文件里面
2、建立缓冲池，将读写频度高的放到内存中.

Skt32 2008-03-31

打赏
举报

使用内存文件

michney 2008-03-21

打赏
举报

memorycache,开源的

dreamlins 2008-03-21

打赏
举报

在线等求方案。。

YJ1973 2008-03-21

打赏
举报

“现在是用vector来保存，不过数据查找的时候速度比较慢，故需求更高效方案。”
“hashmap是高效，但查询条件很局限”
要快速查询就要索引，对一项属性要索引，就要维护至少一个索引表
你想“查询条件不局限”又要“快”，那你就要都索引。

一般的数据库做法都是在key上索引

缓存数据的主要目的是为了减少访问代价，缓存的结果应该与数据库的逻辑结构保持一致。

taodm 2008-03-21

打赏
举报

查找规则都没谈，只能说是废贴。

dreamlins 2008-03-19

打赏
举报

有没有谁有更好的建议呀！！拜托了

加载更多回复（11）

摘要：探讨了高速数据采集系统中高速采样缓存的重要性和实现途径，阐述了基于ADSP-21065L的并行多通道数据采集板上高速采样缓存的设计与电路结构，给出了采用FPGA实现通道复用和采样数据预处理，从而构造16MB的SDRAM海量缓存以将高速缓存中的多批次采样数据经AD-21065L倒入SDRAM存储的实现方法。关键词：高速数据采集；高速缓存；海量缓存；DSP；FPGA１　引言高速数据采集系统目前已在雷达、声纳、软件无线电、瞬态信号测试等领域得到广泛应用。它的关键技术是高速ＡＤＣ技术、数据存储与传输技术和抗干扰技术。本文在分析了高速多通道数据采集系统中存储子系统的性能要求和设计方案的基

个人的独立项目，拿出该项目给大家讲讲，涉及的知识面比较广：较少的前端及知识，SEO知识（核心），后端C#的盘古分词、摘要抽取、文章相似度计算（高速），二叉树、Lucene、采集源文章一至性问题、数据清洗通用处理（复杂正则）、内容合并等，伪静态、关键词获取，复杂采集（加密数据、文字图片同文字混排内容、验证类站点），高级缓存应用，代码性能优化（单服务器下）。高级图片压缩，动态交叉查询（非库）优化，负面文本内容分析(百度)、情感分析(百度)、后台服务等。各类坑的处理。