[请教] c# 读大文件时候什么方式效率最高
例如(每个线程中的发送代码):
---------------------
maxChunkLength=1*1024
FileStream fs = new FileStream(@"d:\1.zip", FileMode.Open,FileAccess.Read,FileShare.Read);
int bytesRemaining=fs.Length;
BinaryReader reader = new BinaryReader(fs);
while (bytesRemaining>0)
{
int bytesToRead = (bytesRemaining < maxChunkLength) ? bytesRemaining : maxChunkLength;
byte[] bytes = new byte[bytesToRead];
int bytesRead = reader.Read(bytes, 0, bytesToRead);
... ...
//发送数据 或者写入文件
bytesRemaining -= bytesToRead;
}
... ...
-------------------
d:\1.zip文件假设为500M,500人同时读该文件,并用socket发送出去。(多线程形式)
在这种情况下,CPU占用为50%,内存占用为60MB,但是硬盘已经高速运转达到极限了。
不知道有什么好的方法提供效率。
不知道扩大maxChunkLength=1*1024 这个读取文件的数组的大小是否能改善状况。
(我想增加数组大小的话,就会减少读取文件所需要的次数,同时增加SOCKET的发送时间,就增加了每次读取之间的间隔时间)*^_^* 不知道这样想对不对
或者有其它方式可以更好的实现,请高手提些建议。
机器配置:P4 2.6X2/2G DDR/1G网卡/SCSI RAID0磁盘阵列(500GB)
---------------------
maxChunkLength=1*1024
FileStream fs = new FileStream(@"d:\1.zip", FileMode.Open,FileAccess.Read,FileShare.Read);
int bytesRemaining=fs.Length;
BinaryReader reader = new BinaryReader(fs);
while (bytesRemaining>0)
{
int bytesToRead = (bytesRemaining < maxChunkLength) ? bytesRemaining : maxChunkLength;
byte[] bytes = new byte[bytesToRead];
int bytesRead = reader.Read(bytes, 0, bytesToRead);
... ...
//发送数据 或者写入文件
bytesRemaining -= bytesToRead;
}
... ...
-------------------
d:\1.zip文件假设为500M,500人同时读该文件,并用socket发送出去。(多线程形式)
在这种情况下,CPU占用为50%,内存占用为60MB,但是硬盘已经高速运转达到极限了。
不知道有什么好的方法提供效率。
不知道扩大maxChunkLength=1*1024 这个读取文件的数组的大小是否能改善状况。
(我想增加数组大小的话,就会减少读取文件所需要的次数,同时增加SOCKET的发送时间,就增加了每次读取之间的间隔时间)*^_^* 不知道这样想对不对
或者有其它方式可以更好的实现,请高手提些建议。
机器配置:P4 2.6X2/2G DDR/1G网卡/SCSI RAID0磁盘阵列(500GB)
...全文
相关推荐
C#利用缓存分块读写大文件
C#利用缓存分块读写大文件,供大家参考,具体内容如下 在日常生活中,可能会遇到大文件的读取,不论是什么格式,按照储存文件的格式读取大文件,就会在Buffer中看到相关的文件头合内容, 以一次.txt文件存取为例。 using System.IO; 首先创建demo文件,此处文件大小没关系,只是演示 private void button2_Click(object sender, EventArgs e) { using (FileStream fsWrite = new FileStream(@D:\1.txt, FileMode.Append))
C# SOCKET方式上传大文件 断点续传
C# 通过 Socket 方式 上传大文件到服务器
c# socket 高性能传送大文件
4G文件已通过测试。对学习很有帮助。共享给大家。 更新:http://download.csdn.net/source/2421757
几分钟搞懂c#之FileStream对象读写大文件(推荐)
主要介绍了c#之FileStream对象读写大文件,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
对大文件的读写的两个类C#
对大文件的分块读写,包括线程的使用,实现了文件的同步拷贝,并且定义了两个事件来对文件块读取进行提示。主要体现了Event 和FileStream的应用


