社区
Linux/Unix社区
帖子详情
读写,ftp大文件(10G以上)
liaomingxue
2005-02-05 12:39:27
Red Hat Linux
我现在需要读写超过10G的大文件,然后再通过ftp下载或者上传
还没有实际测试过(在windows 2000系统中已经失败),请教方法和注意事项
...全文
424
13
打赏
收藏
读写,ftp大文件(10G以上)
Red Hat Linux 我现在需要读写超过10G的大文件,然后再通过ftp下载或者上传 还没有实际测试过(在windows 2000系统中已经失败),请教方法和注意事项
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
13 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
robinswan
2005-02-13
打赏
举报
回复
即使是现在liunux下比较先进的 reiserfs 也这是操作到4G的文件了?
10G!!!有什么文件那边变态阿,还是想其他的途径解决吧。
yiyi999999999
2005-02-10
打赏
举报
回复
可以使用64位的操作系统,如:AIX,solaris等等
gettext
2005-02-09
打赏
举报
回复
>>>>>>linux下那有10G的文件。
>>>>>>回复人: gettext(冰雪之崖)
>>>
>>>linux下不能操作10G大文件?不可能吧
你试试在linux下创建一个大于2G的文件。我觉得你这么大的数据量不可能用文件操作。
liaomingxue
2005-02-08
打赏
举报
回复
>>>linux下那有10G的文件。
>>>回复人: gettext(冰雪之崖)
linux下不能操作10G大文件?不可能吧
nodummy
2005-02-08
打赏
举报
回复
32位地址空间只能放4G的文件,但是一般来说文件的offset都是signed的,所以就要砍掉一半,结果就变成2G了……
FreeBSD的UFS目前已经是至少64位的偏移指针了,所以这个东西FreeBSD没有问题的。但是在客户端程序上面就有比较大的问题了,目前很多的ftp软件都用的32bit的偏移指针,这个是问题的根源,但是在FreeBSD的ports collection里面的确有支持超过2G大小文件的ftp daemon和ftp client,这个是不必说的……
gettext
2005-02-08
打赏
举报
回复
linux下那有10G的文件。
liaomingxue
2005-02-08
打赏
举报
回复
我单位的数据最小是以G,一般是T,全在硬盘阵列中,现在是需要传送和处理。一般处理方法是采用专用的相关分析计算机,可以访问硬盘阵列,或者通过网络回放数据给客户端。现在我们打算用微机自己做些处理。
nodummy
2005-02-08
打赏
举报
回复
超过2G的话很多的ftp server和client端就已经死翘翘了……
不过的确有ftp server可以支持超过2G的文件,不过想不起来叫什么了……
tukey
2005-02-05
打赏
举报
回复
注意:fat32文件系统允许的最大文件为2g!
core
2005-02-05
打赏
举报
回复
google("fopen64");
liaomingxue
2005-02-05
打赏
举报
回复
最好还是不要分割文件,不知道有什么别的好办法?
realcolafish
2005-02-05
打赏
举报
回复
用split把10G大文件分割成几个相对小的文件(每个1000M)
例如文件名叫filename.log
split filename.log -b 1000m filename.log.
这样就可以通过FTP上传下载了,全部完成后再用cat合并
cat filename.log.*>filename.log
liaomingxue
2005-02-05
打赏
举报
回复
顶一个
监听
FTP
服务器来获取
读写
完成的
文件
文件
通过
ftp
客户端上传到
ftp
服务器,服务器段需要及时的把
读写
完成的
文件
保存到其他storage中(或者处理)。这就需要保证监听程序能够监听该
文件
,判断该
文件
已经被写完成了,才能够做后续处理,否则接受到的是一个...
ftp
上传
文件
权限问题
1、程序运行用户prouser,用户组也为prouser 2、
ftp
服务用户
ftp
user,用户目录/home/
ftp
userprouser对
ftp
目录权限要求: 1、prouser用户对/home/
ftp
user有
读写
权限 2、prouser用户对
ftp
user上传的目录和
文件
有...
C#中,
FTP
同步或异步读取大量
文件
FTP
同步和异步读取大量
文件
内容的方法
查看服务器大
文件
命令,
ftp
到服务器查看
文件
大小命令
ftp
到服务器查看
文件
大小命令 内容精选换一换该任务指导用户使用Loader将数据从S
FTP
服务器导入到Hive。创建或获取该任务中创建Loader作业的业务用户和密码。确保用户已授权访问作业中指定的Hive表的权限。获取S
FTP
...
解决
ftp
上传
文件
速度比较慢的问题!
问题描述: 最近在项目中遇到一个问题,每次
ftp
上传图片的的速度都超级慢,...
ftp
上传
文件
速度慢主要有两方面的原因: 1.网络问题,网速限制,并且没使用缓冲流来操作,导致上传的速度比较慢! 2.登录
ftp
与
ftp
...
Linux/Unix社区
23,216
社区成员
74,539
社区内容
发帖
与我相关
我的任务
Linux/Unix社区
Linux/Unix社区 应用程序开发区
复制链接
扫一扫
分享
社区描述
Linux/Unix社区 应用程序开发区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章