-
等级
本版专家分：0结帖率 92.31% -
我要保存最多500条ip地址 使用的时候会用到查询功能 需要用数据库吗展开阅读全文
-
等级
本版专家分：473375勋章
-
-
进士
2018年总版新获得的技术专家分排名前十
2017年 总版技术专家分年内排行榜第十
2013年 总版技术专家分年内排行榜第八
-
-
铜牌
2018年12月 总版技术专家分月排行榜第三
2018年11月 总版技术专家分月排行榜第三
2017年2月 总版技术专家分月排行榜第三
-
-
红花
2019年1月 .NET技术大版内专家分月排行榜第一
2018年12月 .NET技术大版内专家分月排行榜第一
2018年11月 .NET技术大版内专家分月排行榜第一
2018年10月 .NET技术大版内专家分月排行榜第一
2018年9月 .NET技术大版内专家分月排行榜第一
2018年7月 .NET技术大版内专家分月排行榜第一
2018年6月 .NET技术大版内专家分月排行榜第一
2018年1月 .NET技术大版内专家分月排行榜第一
2017年5月 .NET技术大版内专家分月排行榜第一
2017年4月 .NET技术大版内专家分月排行榜第一
2017年3月 .NET技术大版内专家分月排行榜第一
2017年2月 .NET技术大版内专家分月排行榜第一
2016年10月 .NET技术大版内专家分月排行榜第一
2016年8月 .NET技术大版内专家分月排行榜第一
2016年7月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2020年7月 .NET技术大版内专家分月排行榜第二
2019年4月 .NET技术大版内专家分月排行榜第二
2019年3月 .NET技术大版内专家分月排行榜第二
2018年8月 .NET技术大版内专家分月排行榜第二
2018年4月 .NET技术大版内专家分月排行榜第二
2018年3月 .NET技术大版内专家分月排行榜第二
2017年12月 .NET技术大版内专家分月排行榜第二
2017年9月 .NET技术大版内专家分月排行榜第二
2017年7月 .NET技术大版内专家分月排行榜第二
2017年6月 .NET技术大版内专家分月排行榜第二
2016年12月 .NET技术大版内专家分月排行榜第二
2016年9月 .NET技术大版内专家分月排行榜第二
2016年6月 .NET技术大版内专家分月排行榜第二
2016年3月 .NET技术大版内专家分月排行榜第二
2016年1月 .NET技术大版内专家分月排行榜第二
2015年12月 .NET技术大版内专家分月排行榜第二
2015年2月 .NET技术大版内专家分月排行榜第二
2015年1月 .NET技术大版内专家分月排行榜第二
2014年11月 .NET技术大版内专家分月排行榜第二
2014年5月 .NET技术大版内专家分月排行榜第二
2014年4月 .NET技术大版内专家分月排行榜第二
2012年2月 多媒体/设计/Flash/Silverlight 开发大版内专家分月排行榜第二
-
-
你随意，不必纠结这个。最不变的真理，就是程序都会重构的，你在选择时完全不必考虑3个月以后用不用数据库的问题。
-
等级
本版专家分：4977 -
只要你愿意，txt就可以当数据库用
-
等级
本版专家分：2132
-
可以使用xml文件，通过linq to xml完成读写
-
版主等级
本版专家分：420966勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
-
名人
2014年 荣获名人称号
2013年 荣获名人称号
2012年 荣获名人称号
-
- 状元 2013年 总版技术专家分年内排行榜第一
-
- 探花 2014年 总版技术专家分年内排行榜第三
-
-
从编程的角度来说1条数据也可以用数据库
-
版主等级
本版专家分：420966勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
-
名人
2014年 荣获名人称号
2013年 荣获名人称号
2012年 荣获名人称号
-
- 状元 2013年 总版技术专家分年内排行榜第一
-
- 探花 2014年 总版技术专家分年内排行榜第三
-
-
就好比多大计算量用计算机？哪怕算很简单的问题也可以用，而不是用算盘。
-
等级
本版专家分：473375勋章
-
-
进士
2018年总版新获得的技术专家分排名前十
2017年 总版技术专家分年内排行榜第十
2013年 总版技术专家分年内排行榜第八
-
-
铜牌
2018年12月 总版技术专家分月排行榜第三
2018年11月 总版技术专家分月排行榜第三
2017年2月 总版技术专家分月排行榜第三
-
-
红花
2019年1月 .NET技术大版内专家分月排行榜第一
2018年12月 .NET技术大版内专家分月排行榜第一
2018年11月 .NET技术大版内专家分月排行榜第一
2018年10月 .NET技术大版内专家分月排行榜第一
2018年9月 .NET技术大版内专家分月排行榜第一
2018年7月 .NET技术大版内专家分月排行榜第一
2018年6月 .NET技术大版内专家分月排行榜第一
2018年1月 .NET技术大版内专家分月排行榜第一
2017年5月 .NET技术大版内专家分月排行榜第一
2017年4月 .NET技术大版内专家分月排行榜第一
2017年3月 .NET技术大版内专家分月排行榜第一
2017年2月 .NET技术大版内专家分月排行榜第一
2016年10月 .NET技术大版内专家分月排行榜第一
2016年8月 .NET技术大版内专家分月排行榜第一
2016年7月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2020年7月 .NET技术大版内专家分月排行榜第二
2019年4月 .NET技术大版内专家分月排行榜第二
2019年3月 .NET技术大版内专家分月排行榜第二
2018年8月 .NET技术大版内专家分月排行榜第二
2018年4月 .NET技术大版内专家分月排行榜第二
2018年3月 .NET技术大版内专家分月排行榜第二
2017年12月 .NET技术大版内专家分月排行榜第二
2017年9月 .NET技术大版内专家分月排行榜第二
2017年7月 .NET技术大版内专家分月排行榜第二
2017年6月 .NET技术大版内专家分月排行榜第二
2016年12月 .NET技术大版内专家分月排行榜第二
2016年9月 .NET技术大版内专家分月排行榜第二
2016年6月 .NET技术大版内专家分月排行榜第二
2016年3月 .NET技术大版内专家分月排行榜第二
2016年1月 .NET技术大版内专家分月排行榜第二
2015年12月 .NET技术大版内专家分月排行榜第二
2015年2月 .NET技术大版内专家分月排行榜第二
2015年1月 .NET技术大版内专家分月排行榜第二
2014年11月 .NET技术大版内专家分月排行榜第二
2014年5月 .NET技术大版内专家分月排行榜第二
2014年4月 .NET技术大版内专家分月排行榜第二
2012年2月 多媒体/设计/Flash/Silverlight 开发大版内专家分月排行榜第二
-
-
通常，程序会重构（对部分架构底层进行重写），以便完成更多的需求目标。重构了多次之后你才发现自己对于“接口、抽象、设计”有了一些概念。当你认为编程中什么样的重大改进都是“推倒了重来”时，其实你的所谓选择往往是纠结“失败以后怎么办”的，而不是成熟地扩展一个软件的。
软件数据集合首先是纯粹内存里的设计概念，然后才是文件的概念，然后才是（关系）数据库的概念，然后是分布式（甚至非关系）数据库的概念，然后是SOA数据服务概念......每一次重构都维持着第一步就建立起来的接口和设计。学会这个过程比你纠结文件还是数据库更重要。我们那些第一步、第二步做得很好的初学者，总是在第三步也做得很好。反之有些人纠结于第三步，其实并不是因为他觉得第一步太简单了，而是就是不太想练习基础。
-
等级
本版专家分：473375勋章
-
-
进士
2018年总版新获得的技术专家分排名前十
2017年 总版技术专家分年内排行榜第十
2013年 总版技术专家分年内排行榜第八
-
-
铜牌
2018年12月 总版技术专家分月排行榜第三
2018年11月 总版技术专家分月排行榜第三
2017年2月 总版技术专家分月排行榜第三
-
-
红花
2019年1月 .NET技术大版内专家分月排行榜第一
2018年12月 .NET技术大版内专家分月排行榜第一
2018年11月 .NET技术大版内专家分月排行榜第一
2018年10月 .NET技术大版内专家分月排行榜第一
2018年9月 .NET技术大版内专家分月排行榜第一
2018年7月 .NET技术大版内专家分月排行榜第一
2018年6月 .NET技术大版内专家分月排行榜第一
2018年1月 .NET技术大版内专家分月排行榜第一
2017年5月 .NET技术大版内专家分月排行榜第一
2017年4月 .NET技术大版内专家分月排行榜第一
2017年3月 .NET技术大版内专家分月排行榜第一
2017年2月 .NET技术大版内专家分月排行榜第一
2016年10月 .NET技术大版内专家分月排行榜第一
2016年8月 .NET技术大版内专家分月排行榜第一
2016年7月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2020年7月 .NET技术大版内专家分月排行榜第二
2019年4月 .NET技术大版内专家分月排行榜第二
2019年3月 .NET技术大版内专家分月排行榜第二
2018年8月 .NET技术大版内专家分月排行榜第二
2018年4月 .NET技术大版内专家分月排行榜第二
2018年3月 .NET技术大版内专家分月排行榜第二
2017年12月 .NET技术大版内专家分月排行榜第二
2017年9月 .NET技术大版内专家分月排行榜第二
2017年7月 .NET技术大版内专家分月排行榜第二
2017年6月 .NET技术大版内专家分月排行榜第二
2016年12月 .NET技术大版内专家分月排行榜第二
2016年9月 .NET技术大版内专家分月排行榜第二
2016年6月 .NET技术大版内专家分月排行榜第二
2016年3月 .NET技术大版内专家分月排行榜第二
2016年1月 .NET技术大版内专家分月排行榜第二
2015年12月 .NET技术大版内专家分月排行榜第二
2015年2月 .NET技术大版内专家分月排行榜第二
2015年1月 .NET技术大版内专家分月排行榜第二
2014年11月 .NET技术大版内专家分月排行榜第二
2014年5月 .NET技术大版内专家分月排行榜第二
2014年4月 .NET技术大版内专家分月排行榜第二
2012年2月 多媒体/设计/Flash/Silverlight 开发大版内专家分月排行榜第二
-
-
基本上来说，你可以认为不管多少数据都以最原始的方式（放到内存里）来设计接口，然后逐步学会扩展架构中保持数据层DAL接口不变，对应用层隐藏数据操作的底层实现。
数据最终保存在哪儿，取决于变动的因素，例如数量的大小、数据块的大小、存取性能代价、内存消耗、索引技术技术、索引方式、实体结构能否模式化，等等。这些都是变化的。
你要学会的就是变化，而不是永远用一成不变的方式来处理。
-
等级
本版专家分：187381勋章
-
- GitHub 绑定GitHub第三方账户获取
-
-
金牌
2015年9月 总版技术专家分月排行榜第一
2015年8月 总版技术专家分月排行榜第一
2015年7月 总版技术专家分月排行榜第一
2015年6月 总版技术专家分月排行榜第一
2015年5月 总版技术专家分月排行榜第一
2015年4月 总版技术专家分月排行榜第一
-
-
银牌
2016年1月 总版技术专家分月排行榜第二
2015年11月 总版技术专家分月排行榜第二
2015年10月 总版技术专家分月排行榜第二
-
- 优秀版主 优秀小版主
-
-
500ip这种就是基础数据的等级，随便什么方式存储好了，用的时候先加载到内存，然后在内存中进行各种操作
-
等级
本版专家分：473375勋章
-
-
进士
2018年总版新获得的技术专家分排名前十
2017年 总版技术专家分年内排行榜第十
2013年 总版技术专家分年内排行榜第八
-
-
铜牌
2018年12月 总版技术专家分月排行榜第三
2018年11月 总版技术专家分月排行榜第三
2017年2月 总版技术专家分月排行榜第三
-
-
红花
2019年1月 .NET技术大版内专家分月排行榜第一
2018年12月 .NET技术大版内专家分月排行榜第一
2018年11月 .NET技术大版内专家分月排行榜第一
2018年10月 .NET技术大版内专家分月排行榜第一
2018年9月 .NET技术大版内专家分月排行榜第一
2018年7月 .NET技术大版内专家分月排行榜第一
2018年6月 .NET技术大版内专家分月排行榜第一
2018年1月 .NET技术大版内专家分月排行榜第一
2017年5月 .NET技术大版内专家分月排行榜第一
2017年4月 .NET技术大版内专家分月排行榜第一
2017年3月 .NET技术大版内专家分月排行榜第一
2017年2月 .NET技术大版内专家分月排行榜第一
2016年10月 .NET技术大版内专家分月排行榜第一
2016年8月 .NET技术大版内专家分月排行榜第一
2016年7月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2020年7月 .NET技术大版内专家分月排行榜第二
2019年4月 .NET技术大版内专家分月排行榜第二
2019年3月 .NET技术大版内专家分月排行榜第二
2018年8月 .NET技术大版内专家分月排行榜第二
2018年4月 .NET技术大版内专家分月排行榜第二
2018年3月 .NET技术大版内专家分月排行榜第二
2017年12月 .NET技术大版内专家分月排行榜第二
2017年9月 .NET技术大版内专家分月排行榜第二
2017年7月 .NET技术大版内专家分月排行榜第二
2017年6月 .NET技术大版内专家分月排行榜第二
2016年12月 .NET技术大版内专家分月排行榜第二
2016年9月 .NET技术大版内专家分月排行榜第二
2016年6月 .NET技术大版内专家分月排行榜第二
2016年3月 .NET技术大版内专家分月排行榜第二
2016年1月 .NET技术大版内专家分月排行榜第二
2015年12月 .NET技术大版内专家分月排行榜第二
2015年2月 .NET技术大版内专家分月排行榜第二
2015年1月 .NET技术大版内专家分月排行榜第二
2014年11月 .NET技术大版内专家分月排行榜第二
2014年5月 .NET技术大版内专家分月排行榜第二
2014年4月 .NET技术大版内专家分月排行榜第二
2012年2月 多媒体/设计/Flash/Silverlight 开发大版内专家分月排行榜第二
-
-
当你重构了2次之后，如果你需要设计通用的接口层，这个时候对你的影响才真的是比较大的，此时你才真正需要集中精力去考虑不同的数据层实现怎样来维持同一套数据接口的问题。
而纠结最底层用什么现成东西（而自己不需要设计抽象接口）时，其实还在进行不太重要的程序设计，此时讲求的是迅速“经过、体验过”这种阶段，就行了。
-
等级
本版专家分：35516勋章
-
- 银牌 2018年2月 总版技术专家分月排行榜第二
-
- 红花 2018年2月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2019年12月 .NET技术大版内专家分月排行榜第二
2019年5月 .NET技术大版内专家分月排行榜第二
2018年1月 .NET技术大版内专家分月排行榜第二
-
- 蓝花 2019年4月 .NET技术大版内专家分月排行榜第三
-
-
500条，可以用文件，操作方便，复杂查询可以一次性读出到内存，用linq，执行效率也高
- 多大规模的数据才值得用大数据的方式来处理？
本文来自网易云社区。 麦肯锡对于“大数据”的定义是：一种规模大到在获取、存储、管理、分析方面...“大”指的是数据规模，大数据一般指在10TB(1TB=1024GB)规模以上的数据量。 我们应该怎么去理解这句话呢，首先...
- 大数据量高并发访问的数据库优化方法(一)
一、数据库结构的设计 ... 如果不能设计一个合理的数据库模型，不仅会增加客户端和服务器段程序的编程和维护的难度，而且将会影响系统实际运行的性能。... 在一个系统分析、设计阶段，因为数据量
- MySQL数据库面试题（2020最新版）
数据库三大范式是什么mysql有关权限的表都有哪几个MySQL的binlog有有几种录入格式？分别有什么区别？数据类型mysql有哪些数据类型引擎MySQL存储引擎MyISAM与InnoDB区别MyISAM索引与InnoDB索引的区别？InnoDB引擎的4...
- 大数据量数据库设计与优化方案
一、数据库结构的设计 ... 在一个系统分析、设计阶段，因为数据量较小，负荷较低。我们往往只注意到功能的实现，而很难注意到性能的薄弱之处，等到系统投入实际运行一段时间后，才发现系统的性
- 数据量过大时数据库操作的处理
与此同时，应用系统体系的核心、系统数据的存放地――数据库也随着实际应用而急剧膨胀，一些大规模的系统，如人口系统的数据甚至超过了1000万条，可谓海量。那么，如何实现快速地从这些超大容量的数据库中提取数据...
- 超大数据量存储常用数据库分表分库算法总结
这篇文章主要介绍了超大数据量存储常用数据库分表分库算法总结,本文讲解了按自然时间来分表/分库、按数字类型hash分表/分库、按md5值来分表/分库三种方法,以及分表所带来的问题探讨,需要的朋友可以参考下 ...
- 大数据量高并发访问数据库结构的设计
在一个系统分析、设计阶段，因为数据量较小，负荷较低。我们往往只注意到功能的实现，而很难注意到性能的薄弱之处，等到系统投入实际运行一段时间后，才发现系统的性能在降低，这时再来考虑提高系统性能则要花费更...
- 【数据库学习】数据库总结
数据库是长期存储在计算机内、有组织的、可共享的大量数据的集合。 常见数据库管理系统有：Access、mysql、sql server 2）特点 ①数据库数据特点 永久存储、有组织、可共享。 （数据的最小存取...
- MyBatis面试题（2020最新版）
整理好的MyBatis面试题库，史上最全的MyBatis面试题，MyBatis面试宝典，特此分享给大家 MyBatis 介绍 MyBatis 是一款优秀的持久层框架，它支持定制化 SQL、存储过程以及高级映射。MyBatis 避免了几乎所有的 JDBC ...
- Mysql 大数据量高并发的数据库优化
Mysql 大数据量高并发的数据库优化 一、数据库结构的设计 如果不能设计一个合理的数据库模型，不仅会增加客户端和服务器段程序的编程和维护的难度，而且将会影响系统实际运行的性能。所以，在一个系统开始实施...
- 数据库面试
一、数据库问答题 1. SQL语言包括哪些类型？ 数据定义DDL：Create Table,Alter Table,Drop Table, Create/Drop Index等 数据操纵DML：Select ,insert,update,delete, 数据控制DCL：grant,revoke 2. 内联接,外联接...
- PostgreSQL数据库如何快速插入大量数据
PostgreSQL数据库如何快速插入大量数据背景在一些应用场景中，需要向PostgreSQL数据库中快速装入大量的数据，比如数据库迁移，SQL日志分析等。在Abase上快速插入数据有几种方案，每种方案的效率怎么样？如何调优能...
- sqlite3数据库最大可以是多大？可以存放多少数据？读写性能怎么样？
比如有的网友问：Sqlite数据库最大可以多大呀？会不会像acc数据库那样，几十MB就暴掉了？不会的，放心用SQLite, 这是两个数量级的东西, 看下面的说明。Access不能算真正意义上的数据库，但是Access是前台和后台在...
- 大数据量高并发的数据库优化,sql查询优化
一、数据库结构的设计 ... 在一个系统分析、设计阶段，因为数据量较小，负荷较低。我们往往只注意到功能的实现，而很难注意到性能的薄弱之处，等到系统投入实际运行一段时间后，才发现系统的性能在降低，这
- mysql数据库大数据量的查询优化和分页测试
我原来的公司是一家网络游戏公司,其中网站交易与游戏数据库结合通过ws实现的,但是交易记录存放在网站上,级别是千万级别的数据库是mysql数据库. 可能有人会问mysql是否支持千万级数据库,还有既
- 从数据库查询大量数据效率太低
我自己的解决方案是：因为查询单词必须用到用户id，所以不能在服务器启动的时候去查询数据，我是在用户登录成功跳转到主页之前将用户学习过的单词和未学习过的单词查询出来保存到两个List集合中（当然，这里查询的...
- PHP大数据量(大于50万)导出到Excel解决方案
首先，我们可以肯定这个需求太XX(手动和谐)了，这么大的数据量让谁看这去分析啊？一般的Excel数据都是给市场、财务的的非技术部门使用的，所以，我认为应该把思路首先放到为什么需要导出这类数据上，...
- 如何用java jdbc 向数据库表插入大数据量
批量处理本来是为了提高性能，但是太大的数据提交，因为堆的膨胀，堆的寻址会造成性能反而下降。 PreparedStatement加executeBatch方法可以更快，主要想提高预编译sql文件的次数，从而达到提高效率。 如果
- 什么时候才需要大数据量性能测试？
我想想对哦，但我又不明白，那什么时候要做大数据量的性能测试？ 终于发现了一个关键所在：单线程与多线程。在这个问题中，数据的同步采用的是单线程，也就是传递完一个包后，才会接受下一个包，不会...
- 海量数据（数据量比较大时）的处理分析
一、数据量过大，数据中什么情况都可能存在。如果说有10条数据，那么大不了每条去逐一检查，人为处理，如果有上百条数据，也可以考虑，如果数据上到千万级别，甚至过亿，那不是手工能解决的了，必须通过工具或者程序...
- pgsql数据库频繁读写大量数据，读出数据不完整？
实时数据处理程序，结果表不断更新，这样一个过程不断更新：表全部清空--新值插入--前端调用，存在这样一个问题，因为插入值数量较多，一下不能完全插入，会出现前端查询的时候没有得到所有结果的问题，有人说要用...
- 一次mysql大数据量查询 慢查询导致服务阻塞后的学习
简单的查询数据库登录逻辑，使用mysbatis-plus进行的dao层代码生成（吐槽一下这个工具，真是方便一时爽，后面维护难，比较喜欢自己能够组装和优化sql，大数据量插入时候mybatis-plus性能极差都是生成的单条插入sql...
- sqlserver大数据量用like
现在我有一个数据库表，数据量大概是300W，还在不停的添加，其中有一个查询需要用到模糊查询， 如果用select Cs_Id,Cs_Content from Customer_Service where Cs_Content like '%关键字%'的话效率很低，而且如果同时...
- php处理大数据量数据的思路
大数据量的业务场景：excel 导出百万数据，操作百万数据的数组，从数据库表中取出百万数据。两个解决思路:1.从环境配置上，比如调高php脚本的内存限制。ini_set('memory_limit','');2.从代码层面，比如前两种，都是...
- Python批量操作文件写入数据库及从数据库取数据
近期博主在自己的工作电脑上搭建了一个的MySQL数据库，并尝试导入一些数据进去，顺便自己查询，其中遇到了各种各样的问题，才深刻领悟到后端操作的艰难，写篇博客记录一下其中的艰难过程。 编译环境：Python3.7 ...
- Oracle 大数据量查询优化
前言:平常写的SQL可能主要以实现查询出结果为主,但如果数据量一大,就会突出SQL查询语句优化的性能独特之处.一般的数据库设计都会建索引查询,这样较全盘扫描查询的确快了不少.下面总结下SQL查询语句的几个优化效率的...
- MySQL 面试题
MySQL 涉及的内容非常非常非常多，所以面试题也容易写的杂乱。当年，我们记着几个一定要掌握的重心： 重点的题目添加了【重点】前缀。 索引。 锁。 事务和隔离级别。 因为 MySQL 还会有部分内容和运维相关度比较...
- MySQL大数据量的导入与导出
如果我们的数据比较小（比如2M或以下），我们可以很方便的使用phpMyAdmin的导入导出功能，先说导出，我们在phpMyAdmin中导出SQL脚本就相当于文件下载，如果PHP环境允许，脚本执行不会超时的情况也是可以导出大文件的...
- mysql进行大数据量查询,速度慢及解决方式
在项目开发中我们经常会使用左连接进行查询,可能库表中的数据量并不大,所以在查询时感觉不到,如果表中的数据达到了十万条乃至百万条,并且查询的时候列的数据重复量也较大,这个时候进行左连接查询,时间可能达到死亡...
- 数据结构：八大数据结构分类
数据结构分类 数据结构是指相互之间存在着一种或多种关系的数据元素的集合和该集合中...数组是可以再内存中连续存储多个元素的结构，在内存中的分配也是连续的，数组中的元素通过数组下标进行访问，数组下标从0开始...