MySQL用load data命令进行数据导入方法
LOAD DATA语法说明:
LOAD DATA INFILE句法
LOAD DATA [LOW_PRIORITY] [LOCAL] INFILE 'file_name.txt' [REPLACE | IGNORE]
INTO TABLE tbl_name
[FIELDS
[TERMINATED BY 't']
[OPTIONALLY] ENCLOSED BY '']
[ESCAPED BY '\' ]]
[LINES TERMINATED BY 'n']
[IGNORE number LINES]
[(col_name,...)]
最简单的方法
代码如下 | |
mysql>load data local infile "D:/ab.txt" into table mytbl(name,age); |
MySQL支持load data命令的数据导入,该方式比直接的insert的效率要高,按照官方的说法是要比insert语句快上20倍。使用方式如下:
代码如下 | |
mysql>load data local infile "D:/ab.txt" into table mytbl(name,age); |
使用上述的命令就可以将D:/ab.txt文件的内容导入到表mytbl中,其中name和age是表mytbl的字段,对应ab.txt文件中每行的数据。如果编译安装mysql时没有指定–enable-local-infile,那么在使用上述命令时会报如下错误:
ERROR 1148 (42000): The used command is not allowed with this MySQL version
解决方式有两种,一是重新编译安装加上上面的参数,而是直接用命令行执行,如下:
代码如下 | |
mysql -uroot -proot mydb_name --local-infile=1 -e 'load data local infile "D:/ab.txt" into table mytbl(name,age)' |
测试了一把,导入300万条数据时,使用load data命令的时间花销大概在3分钟左右,还是非常不错的!
导入时一些常用错误
系统报错:
Data truncated for column 'f3' at row 1
可能是由于字段定义为double型,而文本文件中是空值,将文本文件更新为:
abc;cdef;2;
再次导入,报错如下:
Row 1 doesn't contain data for all columns
分析原因可能是由于表中字段一共是5个,而在文本数据源中有了4个字段,少1个字段。
Data truncated for column 'f3' at row 1 ,
我理解系统应当按空值处理,即在数据库中这个字段default值为“-1”,
解决办法
代码如下 | |
load data infile 'D:\my_program\Tek_sig\example_data1.txt' |