1.5w+
社区成员
...全文
当前发帖距今超过3年，不再开放新的回复
发表回复
wasltone 2004-08-11
谢了
tonybaobao 2004-08-10
循环读取.如果长时间停止响应的话,还是考虑多线程.
seagis 2004-08-10
char能用动态数组来做吗？
以前用静态的doule，差不多就是8万的时候就不行了，后来改动态的旧没事了！
不知道char的数组行不行，试一下！
以前用静态的doule，差不多就是8万的时候就不行了，后来改动态的旧没事了！
不知道char的数组行不行，试一下！
Barry1058 2004-08-10
while(!feof(fp))
{
buffer[0]=0;
fread(buffer,4096,1,fp);
//deal with buffer
...
}
{
buffer[0]=0;
fread(buffer,4096,1,fp);
//deal with buffer
...
}
jim3000 2004-08-10
写个循环不就完了,每次读4096个字节
guxingfeiyu 2004-08-10
例如：
#define READ_COUNT 32768 * 5
//前面的忽略,byPicData是一个大内存
int i=0;
bool bRet=true;
while(1)
{
nWrite=read(nOpenHandle,(void *)((PBYTE)byPicData+i),nWrite);
if(nWrite<0)
{
bRet=false;
break;
}
i+=nWrite;
if(i==nRead)
break;
if(i+READ_COUNT>nRead)
nWrite=nRead-i;
}
#define READ_COUNT 32768 * 5
//前面的忽略,byPicData是一个大内存
int i=0;
bool bRet=true;
while(1)
{
nWrite=read(nOpenHandle,(void *)((PBYTE)byPicData+i),nWrite);
if(nWrite<0)
{
bRet=false;
break;
}
i+=nWrite;
if(i==nRead)
break;
if(i+READ_COUNT>nRead)
nWrite=nRead-i;
}
kulukyo 2004-08-10
建议（我没试过）：
设定一个段大小，比如10000
第一次读：判断如果文件长度小于段大小，则直接读到缓存中。如果大于段大小，则读取段大小的内容到缓存。
剩下的读取步骤：判断剩下的文件内容大小，如果小于段大小，则直接读到缓存中。如果大于段大小，则读取段大小的内容到缓存。然后重复这一步骤。
设定一个段大小，比如10000
第一次读：判断如果文件长度小于段大小，则直接读到缓存中。如果大于段大小，则读取段大小的内容到缓存。
剩下的读取步骤：判断剩下的文件内容大小，如果小于段大小，则直接读到缓存中。如果大于段大小，则读取段大小的内容到缓存。然后重复这一步骤。
wasltone 2004-08-10
倒 就4个字？
怎么个分段法？
怎么个分段法？
guxingfeiyu 2004-08-10
分段读取。
python较大文件写入与读取，文件太大内存崩溃？这里教你怎么做 文章目录较大文件读取第一种第二种文件写入 较大文件读取 对于文件的读写操作可参考： https://blog.csdn.net/xdc1812547560/article/details/107860396 通过read()读取⽂件内容时会将⽂件中所有的内容全部读取出来...
C# 读取大文件至内存 long offest = 0;...C#提供了FileStream类来操作文件流，可以和Seek()函数一起循环读取文件中特定长度的数据(比如1M)，这样不会造成内存浪费，也符合软件开发的基本逻辑。 下载 源代码
解决大文件的OOM的问题 下面就为大家带来一篇完美解决java读取大文件内存溢出的问题。本人觉得挺不错的，现在就分享给大家，也给大家做个参考。 一、传统方式 1、在内存中读取文件内容 读取文件行的标准方式是在内存中读取，Guava 和...
阿里二面：Redis 中的 AOF 文件太大了怎么办？ 欢迎大家关注我的微信公众号【老周聊架构】，Java后端主流技术栈的原理、源码分析、架构以及各种互联网高并发、高性能、高可用的解决方案。 一、前言 写这篇文章的目的是来自我的一位粉丝的投稿，说面试阿里被问到...
MySQL 面试题 艿艿：貌似我面试没被问过…反正，我是没弄懂过~~ 插入缓冲(insert buffer) 二次写(double write) 自适应哈希索引(ahi) 预读(read ahead) ? 为什么 SELECT COUNT(*) FROM table 在 InnoDB 比 ...
前后端分离。前端POST请求参数过长，导致400错误解决办法及分析 最开始以为瓶颈存在于tomcat，因为tomcat默认能接受的POST请求大小为2M，所以手动修改tomcat server.xml 文件，将接受POST大小修改为不限制。 经测试，发现依旧不起作用。 今天上网查询了相关资料，解决了这个问题。...
Java IO流读写文件的几个注意点 平时写IO相关代码机会挺少的，但却都知道使用BufferedXXXX来读写效率高，没想到里面还有这么多陷阱，这两天突然被其中一个陷阱折腾一下：读一个文件，然后写到另外一个文件，前后两个文件居然不一样？ 解决这个问题...
Kafka：消息是如何在服务端存储与读取的，你真的知道吗？ 每个 Partition 的主从副本分布在不同的 Broker 上，通过这点也可以看出，当某个 Broker 宕机时，可以将分布在其他 Broker 上的从副本设置为主副本，因为只有主副本对外提供读写请求，当然在最新的 2.x 版本中从副本...
R语言︱文件读入、读出一些方法罗列（批量xlsx文件、数据库、文本txt、文件夹） 笔者寄语：批量读取目前看到有以下几种方法：xlsx包、RODBC包、批量转化成csv后读入。 xlsx包 首先尝试用R包解决。即xlsx包。 xlsx包在加载时容易遇到问题。基本都是由于java环境未配置好，或者环境变量引用失败。...
测试开发笔记 103 五、 分支文件进行合并 105 六、 分支冲突的解决 112 第十二章 系统测试 117 概念： 117 分类： 117 功能测试：（Function testing中国 Feature testing国际） 118 性能测试：（Sercarity testing） 118 安全性...
C#基础教程-c#实例教程，适合初学者 可以用任意一种文本编辑软件完成上述代码的编写，然后把文件存盘，假设文件名叫做welcome.cs，C#源文件是以cs作为文件的扩展名。和C语言相同，C#语言是区分大小写的。高级语言总是依赖于许多在程序外部预定义的变量...
linux下文件数、目录数、文件名长度的各种限制 实际上现在出现过由于异常写入大量文件到一个目录中导致文件系统无法列目录的情况，连删除都不行。但是linux还是相当健壮，至少我调用系统API删除还是可行的，真救命。 refer:...
Redis面试题集 死锁：获取锁的客户端因为某些原因而宕机，而未能释放锁，其他客户端无法获取此锁，需要有机制来避免该类问题的发生 容错：当部分节点宕机，客户端仍能获取锁或者释放锁。 如何通过Redis实现分布式锁:(非完善...
消息队列 消息队列中间件是分布式系统中重要的组件，主要解决应用解耦，异步消息，流量削锋等问题，实现高性能，高可用，可伸缩和最终一致性架构。目前使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ，...
Matlab大型文本文件行数方法 由于XP的内存是绝对没有办法将5G的数据一次性加载到工作空间的，此时一般我们是对数据进行分段处理，为了防止长时间等待，让用户以为是死机了，这个时候我们希望添加一个进度条告诉用户处理到什么地方了。...
生产环境Full GC并宕机的亲身经历 文章目录惨案的发生解决方案后续分析可怕的String.split()总结 惨案的发生 Full GC很正常，但是频繁的Full GC并且导致线上CPU飙升，然后服务直接宕掉，这是很可怕的。 2018年11月19号，项目升级，起初观察日志都OK，...
redis配置文件中常用配置详解 但是redis如果中途宕机，会导致可 能有几分钟的数据丢失，根据save来策略进行持久化，Append Only File是另一种持久化方式，可以提供更好的 持久化特性。Redis会把每次写入的数据在接收后都写入 appendonly.aof 文件...
抽丝剥茧带你一步步解决程序死机崩溃的故障 1、程序死机，崩溃 程序死机，崩溃这个应该是程序员调试代码中经常遇到的问题，同时也是最难调试的一个问题。那么什么样的现象是程序死机与崩溃呢？window系统的蓝屏就是一种，指操作系统运行遇到了致命的错误，...
