快速导入MySQL数据库技巧分享 (mysql数据库怎么导入最快)

MySQL数据库是世界上更流行的开源关系型数据库,它可以在多个操作系统上运行,被广泛用于Web应用程序的开发。当我们需要导入大量数据到MySQL数据库中,如果只是通过手动插入数据的方式,效率会非常低下。因此,本文将分享一些快速导入MySQL数据库的技巧,帮助大家提高工作效率。

一、使用LOAD DATA命令导入数据

LOAD DATA命令是MySQL数据库中的一种快速导入数据的方式,它可以从本地计算机或远程服务器中读取数据文件,并将数据文件中的数据导入到MySQL数据库中。使用LOAD DATA命令有以下几个注意事项:

1、数据文件必须在服务器上存在,或者通过FTP等方式将数据文件传输到服务器上。

2、数据文件必须拥有MySQL服务器有权限读取的文件系统权限。

3、将数据文件导入MySQL数据库时,数据文件中的数据必须与MySQL数据库表中的数据类型匹配。

以下是使用LOAD DATA命令导入数据的示例:

“`

LOAD DATA LOCAL INFILE ‘/path/to/data/file.csv’

INTO TABLE MyTable

FIELDS TERMINATED BY ‘,’

LINES TERMINATED BY ‘\n’

IGNORE 1 ROWS;

“`

其中,/path/to/data/file.csv是数据文件的路径,MyTable是要将数据导入的MySQL数据库表名,‘,’和‘\n’是分别表示字段和行分隔符的符号,IGNORE 1 ROWS表示忽略数据文件中的之一行数据。

二、使用SQLyog导入数据

SQLyog是一款GUI工具,可以帮助我们快速导入数据到MySQL数据库中。首先我们需要打开SQLyog并连接到MySQL数据库,步骤如下:

1、选择菜单中的“Tools”,然后选择“Import External Data”。

2、在弹出的“Import External Data”窗口中,选择要导入的文件类型,例如CSV文件,选择文件所在路径,然后点击“Next”。

3、在下一步,设置MySQL数据库连接信息,包括MySQL服务器的IP地址,端口号,用户名和密码。

4、在下一步,设置导入的文件相关信息,包括文件中字段和行的分隔符,表中的列与数据类型对应关系等。

5、在最后一步,点击“OK”按钮即可将数据导入MySQL数据库。

三、使用mysqlimport命令导入数据

mysqlimport命令是MySQL数据库自带的一个命令行工具,可以通过它快速将数据导入到MySQL数据库中,使用mysqlimport命令有以下几个注意事项:

1、数据文件必须在服务器上存在,或者通过FTP等方式将数据文件传输到服务器上。

2、使用此命令时,必须先在MySQL数据库中创建一个与数据文件对应的数据表。

以下是使用mysqlimport命令导入数据的示例:

“`

$ mysqlimport -h localhost -u root -p –local –fields-terminated-by=’,’ MyDatabase /path/to/data/file.csv

“`

其中,localhost是MySQL服务器的IP地址,root是MySQL数据库的管理员账号,MyDatabase是要将数据导入的MySQL数据库名称,‘,’是分隔符,/path/to/data/file.csv是数据文件路径。

综上所述,快速导入MySQL数据库的技巧可以帮助我们提高工作效率,既可以通过命令行方式进行导入,也可以通过GUI工具进行导入,大家可以根据实际需要,选择最适合自己的方式进行操作。

相关问题拓展阅读:

如何向mysql数据库中导入大批量数据?

导入时把生成索引给关掉,应该能快一点.

不要一边导入一边建立索引.

8G数据,应该也不那么慢了.

把sql语句文件读取出一部分看看,建表语句中,应当有建立索引的部分,删掉它!

只做建表和插入数据两件事.

还有,看看数据库有没有外键?

尽量在插入数据过程中去掉外键关联.

等数据插入完成之后再加索引和外键,应该能提高很多读写性能.

截取一部分数据,例如100Mb.

插入一下试试,可以预先对整体时间有一个预期.

还有,真的要弄台好点的电脑,或者去借一台,等把数据导入携樱完成之后,把msyql的库文件直接复制出来放自己磨困机器上跑就好.

emm..

再追加点信息,要先搞明白,sql原文件里,到底都执行了哪几类操作?

可能需要你用c之类写点小工具,或者别的什么语言,分块读取并处理文件.

8G..

嗯,还好.

现在内存都够大,否则你都没法直接用软件打开了.

只有8G也可以直接用软件打开看.

停掉索引真的可以大幅度加瞎隐念快插入数据的速度.

建议试一试!

你双击dbf是什么程序打开肆滑的?vfp吗?

你可以使用set

printer

to

file

abc.sql

list

to

print

然后使用一个文本编辑器,如emeditor,编辑这个abc.sql,将内容构造为标准的sql语句:

insert

into

mytable

(a,b,c,d,e)

values

(‘dbf_field1′,’和雹毕dbf_field2′,’dbf_field3′,’dbf_field4′,’dbf_field5’)

然后在mysql

administrtor中,将这个唤芹abc.sql导入到数据库中就可以了。

转换了mysql的datadir之后怎么导入数据

1.将选中的数据快儿拷贝到一个TXT文本文件中(记得把银扒后面的空格消掉。。否则导入数据库后会有对应的空行),假如存到“D:\data.txt”这个位置里。

2.根据要卖塌导入的数据快儿建立MySql数据库和表,然后进入命令提锋配昌示符里使用命令

load data local infile ‘D:/data.txt’ into table exceltomysql fields terminated by ‘\t’;

注意:盘符我使用的“/”才成功,否则提示找不到文件 下面文章中是用的“\”!

进行导入操作

手动进行Excel数据和MySql数据转换

如何用MySQL命令对数据库进行导出/导入/技巧

info:

1.txt

zhangsan wuhan

lishi wuhan

把1.txt文件插入到mysql数据库中

1.mysql -u root -p 数据库名 导出的文件名

mysqldump -u wcnc -p gp_apps_wcnc > wcnc.sql

2.导出一个表

mysqldump -u 用户名 -p 数据库名 表名> 导出的文件名

mysqldump -u wcnc -p gp_apps_wcnc users> wcnc_users.sql

3.导出一个数据库结构

mysqldump -u wcnc -p -d –add-drop-table gp_apps_wcnc >d:\wcnc_db.sql

-d 没有数据 –add-drop-table 在每个create语句之前增加一个drop table

4.导入数据库

常用source 命令

进入mysql数据库控制台,

如mysql -u root -p

mysql>use 数据库

然后使用source命令,后面参数为脚本文件(如这里用到的.sql)

mysql>source d:\wcnc_db.sql

4.可参看 MySQL数据的导出和导入工具:mysqldump

====================================

批处理是一种非交互式运行mysql程序的方法,如同您在mysql中使用的命令一样,你仍然将使用这些命令。为了实现批处理,您重定向一个文件到 mysql程序中,首先我们需要一个文本文件,这个文本文件包含有与我们在mysql中输入的命令相同的文本。比如我们要插入一些数据,使用包含下面文本的文件(文件名为New_Data.sql,当然我们也可以取名为New_Data.txt及任何其他的合法名字,并不一定要以后缀sql结尾):

USE Meet_A_Geek;

INSERT INTO Customers (Customer_ID, Last_Name) VALUES(NULL, “Block”);

INSERT INTO Customers (Customer_ID, Last_Name) VALUES(NULL, “Newton”);

INSERT INTO Customers (Customer_ID, Last_Name) VALUES(NULL, “Simmons”);

注意上面的这些句子的语法都必须是正确的,并且每个句子以分号结束。上面的USE命令选择数据库,INSERT命令插入数据。

下面我们要把上面的文件导入到数据库中,导入之前要确认数据库已经在运行,即是mysqld进程(或者说服务,Windows NT下面称为”服务“,unix下面为”进程“)已经在运行。然后运行下面的命令:

bin/mysql –p

接着按提示输入密码,如果上面的文件中的语句没有错误,那么这些数据就被导入到了数据库中。

命令行中使用LOAD DATA INFILE 从文件中导入数据到数据库:

现在您可能会问自己,”究竟为什么我要输入所有的这些SQL语句到文件中,然后通过程序运行它们呢?”这样看起来好像需要大量的工作。很好,你这样想很可能就对了。但是假如你有从所有这些命令中产生的log记录呢?现在这样就很棒,嗯,大多数数据库都会自动产生数据库中的事件记录的log。而大部分log 都包含有用过的原始的SQL命令。因此,如果您不能从您现在的数据库中导出数据到新的mysql数据库中使用,那么您可以使用log和mysql的批处理特性,来快速且方便地导入您地数据。当然,这样就省去了打字的麻烦。

LOAD DATA INFILE

这是我们要介绍的最后一个导入数据到MySQL数据库中的方法。这个命令与mysqlimport非常相似,但这个方法可以在mysql命令行中使用。也就是说您可以在所有使用API的程序中使用这个命令。使用这种方法,您就可以在应用程序中导入您想要导入的数据。

使用这个命令之前,mysqld进程(服务)必须已经在运行。启动mysql命令行:

bin/mysql –p

按提示输入密码,成功进入mysql命令行之后,输入下面的命令:

USE Meet_A_Geek;

LOAD DATA INFILE “/home/mark/data.sql” INTO TABLE Orders;

简单的讲,这样将会把文件data.sql中的内容导入到表Orders中,如mysqlimport工具一样,这个命令也有一些可以选择的参数。比如您需要把自己的电脑上的数据导入到远程的数据库服务器中,您可以使用下面的命令:

LOAD DATA LOCAL INFILE “C:\MyDocs\SQL.txt” INTO TABLE Orders;

上面的LOCAL参数表示文件是本地的文件,服务器是您所登陆的服务器。这样就省去了使用ftp来上传文件到服务器,MySQL替你完成了.

您也可以设置插入语句的优先级,如果您要把它标记为低优先级(LOW_PRIORITY),那么MySQL将会等到没有其他人读这个表的时候,才把插入数据。可以使用如下的命令:

LOAD DATA LOW_PRIORITY INFILE “/home/mark/data.sql” INTO TABLE Orders;

您也可以指定是否在插入数据的时候,取代或者忽略文件与数据表中重复的键值。替代重复的键值的语法:

LOAD DATA LOW_PRIORITY INFILE “/home/mark/data.sql” REPLACE INTO TABLE Orders;

上面的句子看起来有点笨拙,但却把关键字放在了让您的剖析器可以理解的地方。

下面的一对选项描述了文件的记录格式,这些选项也是在mysqlimport工具中可以用的。他们在这里看起来有点不同。首先,要用到FIELDS关键字,如果用到这个关键字,MySQL剖析器希望看到至少有下面的一个选项:

TERMINATED BY character

ENCLOSED BY character

ESCAPED BY character

这些关键字与它们的参数跟mysqlimport中的用法是一样的. The

TERMINATED BY 描述字段的分隔符,默认情况下是tab字符(\t)

ENCLOSED BY描述的是字段的括起字符。比方以引号括起每一个字段。

ESCAPED BY 描述的转义字符。默认的是反些杠(backslash:\ ).

下面仍然使用前面的mysqlimport命令的例子,用LOAD DATA INFILE语句把同样的文件导入到数据库中:

LOAD DATA INFILE “/home/mark/Orders.txt” REPLACE INTO TABLE Orders FIELDS TERMINATED BY ‘,’

ENCLOSED BY ‘”‘;

LOAD DATA INFILE语句中有一个mysqlimport工具中没有特点:LOAD DATA INFILE 可以按指定的列把文件导入到数据库中。

当我们要把数据的一部分内容导入的时候,这个特点就很重要。比方说,我们要从Access数据库升级到MySQL数据库的时候,需要加入一些栏目(列/字段 /field)到MySQL数据库中,以适应一些额外的需要。这个时候,我们的Access数据库中的数据仍然是可用的,但是因为这些数据的栏目 (field)与MySQL中的不再匹配,因此而无法再使用mysqlimport工具。尽管如此,我们仍然可以使用LOAD DATA INFILE,下面的例子显示了如何向指定的栏目(field)中导入数据:

LOAD DATA INFILE “/home/Order.txt” INTO TABLE Orders(Order_Number, Order_Date, Customer_ID);

如您所见,我们可以指定需要的栏目(fields)。这些指定的字段依然是以括号括起,由逗号分隔的,如果您遗漏了其中任何一个,MySQL将会提醒您^_^ 。

mysql数据库怎么导入最快的介绍就聊到这里吧,感谢你花时间阅读本站内容,更多关于mysql数据库怎么导入最快,快速导入MySQL数据库技巧分享,如何向mysql数据库中导入大批量数据?,转换了mysql的datadir之后怎么导入数据,如何用MySQL命令对数据库进行导出/导入/技巧的信息别忘了在本站进行查找喔。


数据运维技术 » 快速导入MySQL数据库技巧分享 (mysql数据库怎么导入最快)