社区
MySQL
帖子详情
大数据文件如何导入
taito
2010-01-26 05:02:40
我用mysqldump存下来的 sql命令行,
象这样恢复太慢了
mysql -u root -p test < test.sql
有没有别的办法可以导入(排除data下数据文件的copy方法)。
...全文
239
5
打赏
收藏
大数据文件如何导入
我用mysqldump存下来的 sql命令行, 象这样恢复太慢了 mysql -u root -p test < test.sql 有没有别的办法可以导入(排除data下数据文件的copy方法)。
复制链接
扫一扫
分享
举报
写回复
配置赞助广告
用AI写文章
5 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
军爷_010
2010-01-27
打赏
举报
回复
多大的数据量?
ACMAIN_CHM
2010-01-27
打赏
举报
回复
[Quote]LOAD DATA INFILE 没有用过,有没有例子说说呢。请教![/Quote]手册中有例子和说明。
MySQL官方文档
http://dev.mysql.com/doc/refman/5.1/zh/index.html
taito
2010-01-27
打赏
举报
回复
四十万条数据量,其中一个表数据量超多,是存的编号。
LOAD DATA INFILE 没有用过,有没有例子说说呢。请教!
linfengc
2010-01-26
打赏
举报
回复
[Quote=引用 1 楼 acmain_chm 的回复:]
没有其它办法! mysqldump 倒出的就是些SQL语句。
如果是某个表的话,你可以用 select .. INTO OUTFILE 'file_name' 导出然后 LOAD DATA INFILE 导入会快一些。
[/Quote]
恩,这样已经很快了,还有比这更快的吗?
ACMAIN_CHM
2010-01-26
打赏
举报
回复
没有其它办法! mysqldump 倒出的就是些SQL语句。
如果是某个表的话,你可以用 select .. INTO OUTFILE 'file_name' 导出然后 LOAD DATA INFILE 导入会快一些。
mysql
导入
大数据
文件
1. 切割
文件
, 把
文件
按照每200W行拆分一个
文件
split -l2000000 -d all.csv part_ --verbose 2. 逐个
文件
导入
load data infile '/var/lib/mysql-files/mg/part_00' ignore into TABLE yourTablefields TERMINATED by ',' ENCLOSED BY '...
Hive
导入
大数据
文件
转自http://blog.fens.me/hadoop-hive-10g/ 主要介绍了如何把一个
大数据
文件
导入
到hive中以及操作
mysql快速
导入
大数据
量
文件
在
导入
大数据
量mysql时会出现
导入
时间过长的问题,比如
导入
一个800M的mysql
文件
,普通
导入
需要2小时左右,但是在临时设置mysql的参数后,时间可以加快到2分钟左右,当时我只是设置了以下两个参数。操作参考: https://www.cnblogs.com/niway/p/17616722.html。
sqlcmd
导入
大数据
文件
sqlcmd
导入
大数据
文件
SQLCMD 允许在Windows命令窗中通过命令行提示符运行脚本. 语法如下: sqlcmd[{ { -U <login id> [ -P <password> ] } | -E }][-S <server> [ \<instance > ] ] [ -H <workstation> ...
大数据
hive数仓平台如何通过
文件
导入
导出数据
文本
文件
数据
导入
首先把
文件
转成csv的格式(推荐是csv,并不一定非要是csv,txt,excel也可以,但稳定性不如csv),字符编码推荐utf8 然后在资源管理里选择上传资源-,把你的
文件
上传到平台,例如叫demo.csv 上传完之后就可以写sql把数据
导入
到表里了(
导入
的目标表需要先建表,且结构与文本
文件
里的一致) ...
MySQL
57,062
社区成员
56,759
社区内容
发帖
与我相关
我的任务
MySQL
MySQL相关内容讨论专区
复制链接
扫一扫
分享
社区描述
MySQL相关内容讨论专区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章