社区
C++ Builder
帖子详情
上万条的数据,用List保存,会不会太慢!
DigJim
2004-02-26 12:38:09
我要从数据库中选出可能有上万条的物品资料,经过处理后存到另外的服务器上的数据库中,中间我想用List来保存资料!
我怕数据太多,会不会很慢,或者机器死机,请各位各个建议!!
...全文
473
13
打赏
收藏
上万条的数据,用List保存,会不会太慢!
我要从数据库中选出可能有上万条的物品资料,经过处理后存到另外的服务器上的数据库中,中间我想用List来保存资料! 我怕数据太多,会不会很慢,或者机器死机,请各位各个建议!!
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
13 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
go
数据
库mysql与redis
MySQL 教程MySQL 是流行的关系型
数据
库管理系统,在 WEB 应用方面 MySQL 是最好的 RDBMS(Relational Database Management System:关系
数据
库管理系统)应用软件之一。在本教程中,
会
让大家快速掌握 MySQL 的基本知识,并轻松使用 MySQL
数据
库。什么是
数据
库?
数据
库(Database)是按照
数据
结构来组织、存储和管理
数据
的仓库。每个
数据
库都有一个或多个不同的 API 用于创建,访问,管理,搜索和复制所
保存
的
数据
。我们也可以将
数据
存储在文件中,但是在文件中读写
数据
速度相对较慢。所以,现在我们使用关系型
数据
库管理系统(RDBMS)来存储和管理大
数据
量。所谓的关系型
数据
库,是建立在关系模型基础上的
数据
库,借助于集合代数等数学概念和方法来处理
数据
库中的
数据
。RDBMS 即关系
数据
库管理系统(Relational Database Management System)的特点:1.
数据
以表格的形式出现2.每行为各种记录名称3.每列为记录名称所对应的
数据
域4.许多的行和列组成一张表单5.若干的表单组成databaseRDBMS 术语 在我们开始学习MySQL
数据
库前,让我们先了解下RDBMS的一些术语:
数据
库:
数据
库是一些关联表的集合。
数据
表: 表是
数据
的矩阵。在一个
数据
库中的表看起来像一个简单的电子表格。列: 一列(
数据
元素) 包含了相同类型的
数据
, 例如邮政编码的
数据
。行:一行(=元组,或记录)是一组相关的
数据
,例如一条用户订阅的
数据
。冗余:存储两倍
数据
,冗余降低了性能,但提高了
数据
的安全性。主键:主键是唯一的。一个
数据
表中只能包含一个主键。你可以使用主键来查询
数据
。外键:外键用于关联两个表。复合键:复合键(组合键)将多个列作为一个索引键,一般用于复合索引。索引:使用索引可快速访问
数据
库表中的特定信息。索引是对
数据
库表中一列或多列的值进行排序的一种结构。类似于书籍的目录。参照完整性: 参照的完整性要求关系中不允许引用不存在的实体。与实体完整性是关系模型必须满足的完整性约束条件,目的是保证
数据
的一致性。MySQL 为关系型
数据
库(Relational Database Management System), 这种所谓的关系型可以理解为表格的概念, 一个关系型
数据
库由一个或数个表格组成, 如图所示的一个表格: 表头(header): 每一列的名称;列(col): 具有相同
数据
类型的
数据
的集合;行(row): 每一行用来描述某条记录的具体信息;值(value): 行的具体信息, 每个值必须与该列的
数据
类型相同;键(key): 键的值在当前列中具有唯一性。MySQL
数据
库MySQL 是一个关系型
数据
库管理系统,由瑞典 MySQL AB 公司开发,目前属于 Oracle 公司。MySQL 是一种关联
数据
库管理系统,关联
数据
库将
数据
保存
在不同的表中,而不是将所有
数据
放在一个大仓库内,这样就增加了速度并提高了灵活性。MySQL 是开源的,目前隶属于 Oracle 旗下产品。MySQL 支持大型的
数据
库。可以处理拥有上千万条记录的大型
数据
库。MySQL 使用标准的 SQL
数据
语言形式。MySQL 可以运行于多个系统上,并且支持多种语言。这些编程语言包括 C、C++、Python、Java、Perl、PHP、Eiffel、Ruby 和 Tcl 等。MySQL 对PHP有很好的支持,PHP 是目前流行的 Web 开发语言。MySQL 支持大型
数据
库,支持 5000 万条记录的
数据
仓库,32 位系统表文件最大可支持 4GB,64 位系统支持最大的表文件为8TB。MySQL 是可以定制的,采用了 GPL 协议,你可以修改源码来开发自己的 MySQL 系统。Redis 教程REmote DIctionary Server(Redis) 是一个由 Salvatore Sanfilippo 写的 key-value 存储系统,是跨平台的非关系型
数据
库。Redis 是一个开源的使用 ANSI C 语言编写、遵守 BSD 协议、支持网络、可基于内存、分布式、可选持久性的键值对(Key-Value)存储
数据
库,并提供多种语言的 API。Redis 通常被称为
数据
结构服务器,因为值(value)可以是字符串(String)、哈希(Hash)、列表(
list
)、集合(sets)和有序集合(sorted sets)等类型。
上万条
数据
的Excel导入,存库历程
1. 需求:页面上传16万条
数据
的excel, 后台一些过滤操作后存表 一开始我想,就用就从常用的JavaPOI导出Excel有三种形式选一个:HSSFworkbook,XSSFworkbook,SXSSFworkbook 但是 实践过程中发现,事实并不是想象的那么随意,实践结果是 这三个都不能使用 HSSFworkbook ,XSSFworkbook : 太小,解析导入...
java 百万千万级别excel
数据
导出问题(解决导出慢和OutOfMemoryError内存溢出的问题)
业务场景 由于很多业务需要导出
数据
库里的
数据
,一般我们导出的
数据
都是要给业务部门看的,他们也
会
拿到做一些
数据
统计,所以一般都是给他们导出Excel格式的
数据
文件,但是当我导出五十万条
数据
时遇到了两个问题: 导出时一般使用POI工具包,这时很容易导致内存溢出 导出时间很慢,很容易导致超时 下面是直接导出时内存占用. 原因分析 由于Java对象是封装型对象,所以内存中对象大小是实际
数据
的好几倍,所以50W条的
数据
,最少要有50W个对象,再加上我们可能使用map对象挥着JsonObject对其进行一些
数据
操
数据
量过大,查询过程缓慢?
数据
库分页查询优化最全方法教你一键全解
原文:https://www.enmotech.com/web/detail/1/804/1.html 导读:当需要从
数据
库查询的表有
上万条
记录的时候,一次性查询所有结果
会
变得很慢,特别是随着
数据
量的增加特别明显,这时需要使用分页查询。对于
数据
库分页查询,也有很多种方法和优化的点。本文列举出一些方法,希望对大家有帮助。 准备工作 一般分页查询 使用子查询优化 使用...
总是觉得python爬取
数据
太慢
?这些方法轻松提高爬取性能
爬虫的本质就是一个socket客户端与服务端的通信过程,如果我们有多个url待爬取,只用一个线程且采用串行的方式执行,那只能等待爬取一个结束后才能继续下一个,效率
会
非常低。 **需要强调的是:**对于单线程下串行N个任务,并不完全等同于低效,如果这N个任务都是纯计算的任务,那么该线程对cpu的利用率仍然
会
很高,之所以单线程下串行多个爬虫任务低效,是因为爬虫任务是明显的IO密集型程序。 那么该如何提...
C++ Builder
13,825
社区成员
102,679
社区内容
发帖
与我相关
我的任务
C++ Builder
C++ Builder相关内容讨论区
复制链接
扫一扫
分享
社区描述
C++ Builder相关内容讨论区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章