社区
MySQL
帖子详情
load data infile的局限性
ldb2741
2010-02-02 10:57:16
txt文本有2万行,每行4列数据,用tab分隔符分开。
mysql一张表里有一个自动增长的id字段和另外7个字段,我想把txt里的4列数据导入表中指定的字段,该怎么半呢?
...全文
78
3
打赏
收藏
load data infile的局限性
txt文本有2万行,每行4列数据,用tab分隔符分开。 mysql一张表里有一个自动增长的id字段和另外7个字段,我想把txt里的4列数据导入表中指定的字段,该怎么半呢?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
3 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
ldb2741
2010-02-02
打赏
举报
回复
惭愧,多谢ACMAIN_CHM
ACMAIN_CHM
2010-02-02
打赏
举报
回复
手册中的例子
LOAD DATA INFILE 'persondata.txt' INTO TABLE persondata (col1,col2,...);
ACMAIN_CHM
2010-02-02
打赏
举报
回复
语法如下啊,注意红色部分的用途
LOAD DATA [LOW_PRIORITY | CONCURRENT] [LOCAL] INFILE 'file_name'
[REPLACE | IGNORE]
INTO TABLE tbl_name
[CHARACTER SET charset_name]
[{FIELDS | COLUMNS}
[TERMINATED BY 'string']
[[OPTIONALLY] ENCLOSED BY 'char']
[ESCAPED BY 'char']
]
[LINES
[STARTING BY 'string']
[TERMINATED BY 'string']
]
[IGNORE number LINES]
[(col_name_or_user_var,...)]
[SET col_name = expr,...]
MySQL官方文档
http://dev.mysql.com/doc/refman/5.1/zh/index.html
mysql:
load
data
in
file
基本语法:
load
data
[low_priority] [local] in
file
'
file
_name txt' [replace | ignore] into table tbl_name [fields [terminated by't'] [OPTIONALLY] enclosed by ''] [escaped by'\' ]] [lines terminated
Load
Data
From CSV
chap1 从csv中加载数据集 加载csv文件 #
Load
a CSV
file
def
load
_csv(
file
name):
file
= open(
file
name, "r") lines = reader(
file
)
data
set = list(lines) return
data
set 其中,len(
data
set)表示行数, len(
data
set[0]))表示列...
MySQL大批量数据入库--
load
in
file
MySQL大批量数据入库
MySQL 大数据入库 (单一表)
最近一段时间在研究数据入库,对于INSERT命令,少量数据时可以满足,而对于大量数据插入同一个表的时候速度很慢,明显不符合要求。于是从网上找了一下,MYSQL中有一个
LOAD
DATA
IN
FILE
命令。在此简单说一下
LOAD
DATA
IN
FILE
的作用:它主要将文件中记录批量录入表中,速度非常快。但只能对于一个表进行操作,也就是说所有的记录都是一个表中的,有一定的
局限性
。 下
HBase工具之Bulk
Load
使用Bulk
Load
是由于实际业务的需要,每个月底都需要向HBase插入大约200G的数据,接近10亿条记录。在插入过程中需要占用大量的IO资源,极大影响了现有的实时数据入库业务的效率。因此需要寻找一种替代的方案来在不影响现有业务的基础上,不占用大量集群资源,快速高效的插入大量的数据。本文主要介绍了Bulk
Load
的工作机制和应用,以及在使用过程中遇到的问题,最后简要分析了Bulk
Load
的源码步骤
MySQL
56,677
社区成员
56,708
社区内容
发帖
与我相关
我的任务
MySQL
MySQL相关内容讨论专区
复制链接
扫一扫
分享
社区描述
MySQL相关内容讨论专区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章