python 多个txt文件合并成一个txt文件

tina437213 2013-04-26 03:32:00

python代码哟！
现有1.txt 2.txt。。。等等多个txt文件，想要把它合并成1个txt文件。
因为数据量很大所以不想用readline（）逐行读取，求大牛指导有没有能整个追加文件的方法。

比如1.txt
123 334
234 jskdfs
dka kdsk

2.txt
dsfmks djks
djsk ksdls

3.txt
。。。

合并成all.txt
123 334
234 jskdfs
dka kdsk
dsfmks djks
djsk ksdls
。。。。

...全文

15174 10 打赏收藏转发到动态举报

写回复

用AI写文章

10 条回复

切换为时间正序

请发表友善的回复…

发表回复

幸福的程序猿 2014-09-22

打赏
举报

python不懂，shell可以用paste file1 flie2

xuch 2013-04-27

打赏
举报

引用 4 楼 openXMPP 的回复:

cat 1.txt 1>>2.txt 这样子行不行直接上的shell了加个循环可以叠加

顶4楼，最简单的用 Python system 函数调用shell命令行 1. Linux 系统: cat 2.txt 1 >> 1.txt 2. windows系统: type 2.txt >> 1.txt What hard? How smart?

tina437213 2013-04-27

打赏
举报

我这每个小txt大约10M左右。。。

tina437213 2013-04-27

打赏
举报

6楼问的正是我想问的。。

maniachhz 2013-04-26

打赏
举报

引用 5 楼 angel_su 的回复:

readline()读一行 read()全部读取 read(n)读n个字节内存够用就read()一次读入吧，怕文件超大爆内存就read(n)，代码类似： fo = open('all,txt', 'w') for name in ['1.txt','2.txt', ...]: fi = open(name) while True: s = fi.read(16*1024) if not s: break fo.write(s) fi.close() fo.close() 红字部分其实就是shutil.copyfileobj，一般读写不是直到磁盘，还需经系统调度的，16k缓存差不多了，再大也没啥加速效果...

弱弱问句, 这条fo = open('all,txt', 'w') 语句, 文件all.txt会不会被覆盖

angel_su 2013-04-26

打赏
举报

readline()读一行 read()全部读取 read(n)读n个字节内存够用就read()一次读入吧，怕文件超大爆内存就read(n)，代码类似： fo = open('all,txt', 'w') for name in ['1.txt','2.txt', ...]: fi = open(name) while True: s = fi.read(16*1024) if not s: break fo.write(s) fi.close() fo.close() 红字部分其实就是shutil.copyfileobj，一般读写不是直到磁盘，还需经系统调度的，16k缓存差不多了，再大也没啥加速效果...