bitscn.com
mysql高速导入导出大容量txt文本
先谈谈如何mysql导入txt
用到loaddata, mysql的load data infile语句用于高速地从一个文本文件中读取行,并装入一个表中。load data infile语句从一个文本文件中以很高的速度读入一个表中。
load data参数配置:
sql代码
load data [low_priority] [local] infile 'file_name.txt(file路径)' [replace | ignore]
into table tbl_name
[fields
[terminated by '/t']
[optionally] enclosed by '']
[escaped by '//' ]]
[lines terminated by '/n']
[ignore number lines]
[(col_name,...)]
如果指定local关键词,从客户本地主机读文件。如果local没指定,文件必须位于服务器上(远程用的)。(local在mysql3.22.6或以后版本中可用。)如果你指定关键词low_priority,load data语句的执行被推迟到没有其他客户读取表后。replace和ignore关键词控制对现有的唯一键记录的重复的处理。如果你指定replace,新行将代替有相同的唯一键值的现有行。
如果你 指定ignore,跳过有唯一键的现有行的重复行的输入。如果你不指定任何一个选项,当找到重复键键时,出现一个错误,并且文本文件的余下部分被忽略时。如果你使用local关键词从一个本地文件装载数据,服务器没有办法在操作的当中停止文件的传输,因此缺省的行为好像ignore被指定一样。load data infile是select ... into outfile的逆操作,select句法。为了将一个数据库的数据写入一个文件,使用select ... into outfile,为了将文件读回数据库,使用load data infile。两个命令的fields和lines子句的语法是相同的。两个子句是可选的,但是如果指定两个,fields必须在lines之前。
如果你指定一个fields子句,它的每一个子句(terminated by, [optionally] enclosed by和escaped by)也是可选的,除了你必须至少指定他们之一。
如果你不指定一个fields子句,缺省值与如果你这样写的相同:
fields terminated by '/t' enclosed by '' escaped by '//'
如果你不指定一个lines子句,缺省值与如果你这样写的相同:
lines terminated by '/n'
换句话说,缺省值导致读取输入时,load data infile表现如下:
在换行符处寻找行边界
在定位符处将行分进字段
不要期望字段由任何引号字符封装
将由“/”开头的定位符、换行符或“/”解释是字段值的部分字面字符
相反,缺省值导致在写入输出时,select ... into outfile表现如下:
在字段之间写定位符
不用任何引号字符封装字段
使用“/”转义出现在字段中的定位符、换行符或“/”字符
在行尾处写换行符
注意,为了写入fields escaped by '//',对作为一条单个的反斜线被读取的值,你必须指定2条反斜线值。
ignore number lines选项可被用来忽略在文件开始的一个列名字的头:
mysql> load data infile /tmp/file_name into table test ignore 1 lines;
我建了一个demo表:
sql代码
mysql> use db_cmd_demo;
mysql> explain insertdemo;
+-------+-------------+------+-----+---------+-------+
| field | type | null | key | default | extra |
+-------+-------------+------+-----+---------+-------+
| code | varchar(25) | yes | | null | |
| demo | varchar(15) | no | | | |
+-------+-------------+------+-----+---------+-------+
2 rows in set (0.01 sec)
file_aa.txt文本格式如下:
xml/html代码
aavtualojjkec
aahrftxiblgyg
aaoaqvljrosbt
aacnkrkbzedpe
sql代码
mysql> load data local infile 'd:/file_aa.txt' into table insertdemo (demo);
query ok, 4 rows affected (0.00 sec)
records: 4 deleted: 0 skipped: 0 warnings: 0
生成如下:
sql代码
mysql> select * from insertdemo;
+------+----------------+
| code | demo |
+------+----------------+
| null | aacnkrkbzedpe |
| ull | aaoaqvljrosbt
| ull | aahrftxiblgyg
| ull | aavtualojjkec
+------+----------------+
4 rows in set (0.00 sec)
再谈谈mysql如何导出到txt
这是网上的一个demo,在这里贴一下,其实两个用法主要是理解每个参数的用法就ok了
sql代码
-- 导出数据为文本文件
select demo,code
into outfile 'd:/dm_hy_export.txt'
fields terminated by ',' optionally enclosed by ''''
lines terminated by '/n'
from insertdemo;
fields terminated by ',' 数据字段间用逗号隔开
optionally enclosed by '''' 每个字段的数据用单引号括住(注意单引号的表达方法)
lines terminated by '/n' 每条数据结束用'/n'作为换行符。
bitscn.com