Chinaunix首页 | 论坛 | 博客
  • 博客访问: 4733242
  • 博文数量: 930
  • 博客积分: 12070
  • 博客等级: 上将
  • 技术积分: 11448
  • 用 户 组: 普通用户
  • 注册时间: 2008-08-15 16:57
文章分类

全部博文(930)

文章存档

2011年(60)

2010年(220)

2009年(371)

2008年(279)

分类: Mysql/postgreSQL

2011-02-20 15:34:42

Mysql批量插入LOAD DATA INFILE

基本语法:

LOAD DATA [LOW_PRIORITY | CONCURRENT] [LOCAL] INFILE 'file_name.txt'    [REPLACE | IGNORE]    INTO TABLE tbl_name    [FIELDS        [TERMINATED BY 'string']        [[OPTIONALLY] ENCLOSED BY 'char']        [ESCAPED BY 'char' ]    ]    [LINES        [STARTING BY 'string']        [TERMINATED BY 'string']    ]    [IGNORE number LINES]    [(col_name_or_user_var,...)][SET col_name = expr,...)] load data infile语句从一个文本文件中以很高的速度读入一个表中。使用这个命令之前,mysqld进程(服务)必须已经在运行。为了安全原因,当读取位于服务器上的文本文件时,文件必须处于数据库目录或可被所有人读取。另外,为了对服务器上文件使用load data infile,在服务器主机上你必须有file的权限。

1  如果你指定关键词low_priority,那么MySQL将会等到没有其他人读这个表的时候,才把插入数据。可以使用如下的命令: 
load data  low_priority infile "/home/mark/data sql" into table Orders;

 

2  如果指定local关键词,则表明从客户主机读文件。如果local没指定,文件必须位于服务器上。

 

3  replaceignore关键词控制对现有的唯一键记录的重复的处理。如果你指定replace,新行将代替有相同的唯一键值的现有行。如果你指定ignore,跳过有唯一键的现有行的重复行的输入。如果你不指定任何一个选项,当找到重复键时,出现一个错误,并且文本文件的余下部分被忽略。例如:

load data  low_priority infile "/home/mark/data sql" replace into table Orders;

 

分隔符

1 fields关键字指定了文件记段的分割格式,如果用到这个关键字,MySQL剖析器希望看到至少有下面的一个选项: 
terminated by分隔符:意思是以什么字符作为分隔符
enclosed by字段括起字符
escaped by转义字符

terminated by描述字段的分隔符,默认情况下是tab字符(\t 
enclosed by描述的是字段的括起字符。
escaped by描述的转义字符。默认的是反斜杠(backslash  

例如:load data infile "/home/mark/Orders txt" replace into table Orders fields terminated by',' enclosed by '"';

2lines 关键字指定了每条记录的分隔符默认为'\n'即为换行符

如果两个字段都指定了那fields必须在lines之前。 如果不指定fields关键字缺省值与如果你这样写的相同: fields terminated by'\t' enclosed by ’ '' ‘ escaped by'\\'

如果你不指定一个lines子句,缺省值与如果你这样写的相同: lines terminated by'\n'

例如:load data infile "/jiaoben/load.txt" replace into table test fields terminated by ',' lines terminated by '/n';

 load data infile 可以按指定的列把文件导入到数据库中。 当我们要把数据的一部分内容导入的时候,,需要加入一些栏目(列/字段/field)到MySQL数据库中,以适应一些额外的需要。比方说,我们要从Access数据库升级到MySQL数据库的时候

下面的例子显示了如何向指定的栏目(field)中导入数据: 
load data infile "/home/Order txt" into table Orders(Order_Number, Order_Date, Customer_ID);

 当在服务器主机上寻找文件时,服务器使用下列规则: 
1)如果给出一个绝对路径名,服务器使用该路径名。 
2)如果给出一个有一个或多个前置部件的相对路径名,服务器相对服务器的数据目录搜索文件。  
3)如果给出一个没有前置部件的一个文件名,服务器在当前数据库的数据库目录寻找文件。 
例如: /myfile txt”给出的文件是从服务器的数据目录读取,而作为“myfile txt”给出的一个文件是从当前数据库的数据库目录下读取。

 

 

1.       简单使用

mysql> load data infile '/tmp/test.txt' into table test fields terminated by ' ' lines terminated by '\n';

Query OK, 8 rows affected (0.00 sec)

Records: 8  Deleted: 0  Skipped: 0  Warnings: 0

 

mysql> select * from test;

+------+--------+

| id   | name   |

+------+--------+

|    1 | wsj    |

|    2 | kenthy |

|    3 | haha   |

|    4 | hehe   |

| NULL | NULL   |

|    5 | gg     |

| NULL | NULL   |

|    6 | wowo   |

+------+--------+

8 rows in set (0.00 sec)

 

对于没有的数据可以在文本里使用\N填充

 

 

Tencent:/data/kenthy/mysqlMonitor #                     cat /tmp/test.txt

1 wsj

2 kenthy

3 haha

4 hehe

\N \N

5 gg

\N \N

6 wowo

 

 

 

2.       Select into outfile

mysql> SELECT * INTO OUTFILE '/tmp/data.txt' FIELDS TERMINATED BY ',' FROM table2;  

3.       Load infile set子句

SET子句中的用户变量可以采用多种方式使用。以下例子使用数据文件中的第一列,直接用于t1.column1的值。在用户变量被用于t2.column2值之前,把第二列赋予用户变量。该变量从属于一个分割运行。

LOAD DATA INFILE 'file.txt' INTO TABLE t1 (column1, @var1) SET column2 = @var1/100;

 

SET子句可以被用于提供不是来源于输入文件的值。以下语句把column3设置为当前的日期和时间:

LOAD DATA INFILE 'file.txt'  INTO TABLE t1 (column1, column2) SET column3 = CURRENT_TIMESTAMP; 

您也可以通过把输入值赋予一个用户变量,同时不把变量赋予表中的列,来丢弃此输入值:

LOAD DATA INFILE 'file.txt' INTO TABLE t1  (column1, @dummy, column2, @dummy, column3);

 

 

 

阅读(2277) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~