如何对超过二千万条记录的大数据进行检索

[rivern]

如何对超过二千万条记录的大数据进行检索?在.NET领域里，要用到什么框架才能进行快速检索？
就像这个网站那样快速，不过他的据说是用Python开发的。

[以专业开发人员为伍]

两千万条记录不算多，是很小的数据量。 关键是你所谓的“检索”的具体设计，你并没有说明它的机制，根本看不出你用了什么索引。 从2千万条数据中检索的速度，跟2万条数据检索的速度相比，只是差了40%的速度而已，也就是 400毫秒跟3500毫秒的差别。但是如果你不懂索引而胡乱“遍历”，那么可能你最终就得到了10个小时都检索不出来。 看你在设计和提问时只提最简单最顶级的概念，而不讲内部机制，我估计你不太懂得“数据结构、检索、数据库”的知识。这方面应该重点重学。

[以专业开发人员为伍]

对于数据结构、算法问题，那些对你扯到“编程语言”的都是很糟糕的人，或者就是做广告的。 你还是先要搞懂机制，提高自身（与编程语言没有什么关系的）基础知识，抛开某个语言的坑人的宣传。

[娃都会打酱油了]

elk，es大数据部分其实已经不是编程语言的事情了

[gangAndgang]

这应该不是你用什么框架的问题吧,是用什么数据库以及数据库的物理结构和索引设计问题

[圣殿骑士18]

看楼主的签名，这广告来的猝不及防呀

[EnForGrass]

ElasticSearch

[yzf86211861]

引用 5 楼 daixf_csdn 的回复:

看楼主的签名，这广告来的猝不及防呀

+1

[Poopaye]

[罗纳尔迪尼奥]

如何对超过二千万条记录的大数据进行检索?在.NET领域里，要用到什么框架才能进行快速检索？ 具体问题具体分析，没有条件设定开放性的问题，兼职就是瞎扯淡

[by_封爱]

这不是数据库的问题么....

[低调是种无声的高调]

引用 5 楼 daixf_csdn 的回复:

看楼主的签名，这广告来的猝不及防呀

这证明，csdn的广告还是非常智能的

[大然然]

分库 分表？

[devmiao]

看下什么类型的数据，用hashtable建立索引