MYSQL里面插入500万条数据，最优的方式插入

[浮生若梦~]

表结构比较简单id ,name,area,sex,lasttime. innodb collate=utf8_general_ci

[xuzuning]

处理成 csv 格式的文件
用 LOAD DATA INFILE 指令加载

[我达威]

什么样的文件还是采集的?

[浮生若梦~]

导入测试数据用的

[ws_123456]

BigDump

[浮生若梦~]

最后的方法分享下：先 生成 以逗号分割，以\t分割，条记录以\r\n分割。
在LOAD DATA INFILE 去掉索引 100万条13s. 500万条1min18s

[浮生若梦~]

那个，要怎么用php往文件写入500万条数据呢。有什么好的方法吗

[伴老思源]

[Quote=引用 1 楼 的回复:]

处理成 csv 格式的文件
用 LOAD DATA INFILE 指令加载
[/Quote]
+1

[伴老思源]

[Quote=引用 5 楼 的回复:]

那个，要怎么用php往文件写入500万条数据呢。有什么好的方法吗
[/Quote]

假设现有数据的表为_T，那么可以直接生成一张表并复制表_T中的数据~

create table _T2 select * from _T order by id limit 0,5000000;

[浮生若梦~]

如果是sql文件要怎么转成csv。是不是只要转数据不用语句

[xuzuning]

[Quote=引用 8 楼 的回复:]

如果是sql文件要怎么转成csv。是不是只要转数据不用语句
[/Quote]如果是sql文件，那就直接导入就是了
你最好给个文件的片段

[浮生若梦~]

文件是insert into table ()values();insert into..... 省略500万条

[xuzuning]

mysql> source filename

[浮生若梦~]

这样好像很慢，表里面有索引自增id和用户名。

[一起混吧]

你可以先将索引删掉，导入完成后再重建。

[浮生若梦~]

一条条执行是比较慢的。如果直接sql 中while会更快吗