如何将CSV文件导入MySQL表?

我有一个来自客户端的非规范化事件日记CSV，我试图将其加载到MySQL表中，以便我可以重构成一个正常的格式。我创建了一个名为“CSVImport”的表，它有一个字段为CSV文件的每一列。CSV包含99列，所以这本身就已经是一项艰巨的任务:

CREATE TABLE 'CSVImport' (id INT);
ALTER TABLE CSVImport ADD COLUMN Title VARCHAR(256);
ALTER TABLE CSVImport ADD COLUMN Company VARCHAR(256);
ALTER TABLE CSVImport ADD COLUMN NumTickets VARCHAR(256);
...
ALTER TABLE CSVImport Date49 ADD COLUMN Date49 VARCHAR(256);
ALTER TABLE CSVImport Date50 ADD COLUMN Date50 VARCHAR(256);

表上没有约束，所有字段都包含VARCHAR(256)值，除了包含计数(用INT表示)、是/否(用BIT表示)、价格(用DECIMAL表示)和文本介绍(用text表示)的列。

我尝试将数据加载到文件中:

LOAD DATA INFILE '/home/paul/clientdata.csv' INTO TABLE CSVImport;
Query OK, 2023 rows affected, 65535 warnings (0.08 sec)
Records: 2023  Deleted: 0  Skipped: 0  Warnings: 198256
SELECT * FROM CSVImport;
| NULL             | NULL        | NULL           | NULL | NULL               | 
...

整个表被NULL填充。

我认为问题在于文本简介包含多行，MySQL解析文件时就好像每个新行对应一个数据库行一样。我可以毫无问题地将文件加载到OpenOffice中。

csv文件包含2593行和570条记录。第一行包含列名。我认为它是用逗号分隔的，文本显然是用双引号分隔的。

更新:

如果有疑问，请阅读手册:http://dev.mysql.com/doc/refman/5.0/en/load-data.html

我在LOAD DATA语句中添加了一些OpenOffice智能推断的信息，现在它加载了正确数量的记录:

LOAD DATA INFILE "/home/paul/clientdata.csv"
INTO TABLE CSVImport
COLUMNS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '"'
ESCAPED BY '"'
LINES TERMINATED BY '\n'
IGNORE 1 LINES;

但是仍然有很多完全为空的记录，没有一个数据被加载似乎在正确的地方。

当前回答

以下是excel文件截图示例:

另存为并选择.csv。

如果您使用notepad++或任何其他记事本打开，您将会看到如下所示的.csv数据屏幕截图。

确保在.csv中删除标题和列对齐，就像在mysql表中一样。将folder_name替换为文件夹名称

加载数据本地文件 “D: / folder_name / myfilename.csv” 进入表格邮件以'，'结尾的字段 (fname,lname,email, phone);

如果大数据，你可以拿着咖啡装!

这就是你所需要的。

2017-03-31 11:01:25

其他回答

另一个解决方案是使用csvkit套件中的csvsql工具。

使用的例子:

csvsql --db mysql://$user:$password@localhost/$database --insert --tables $tablename  $file

该工具可以自动推断数据类型(默认行为)，创建表并将数据插入到创建的表中。——override选项可以用来删除已经存在的表。——insert选项——从文件中填充表。

安装套件

pip install csvkit

前提条件:python-dev, libmysqlclient-dev, MySQL-python

apt-get install python-dev libmysqlclient-dev
pip install MySQL-python

2018-06-21 14:15:20

我看到一些奇怪的东西。用于转义的字符与用于封闭的字符相同。因此，当引擎发现一个“”时，它不知道该做什么，我认为这就是为什么似乎没有什么东西在正确的地方。我觉得如果去掉了escape这条线，应该会跑得很棒。如:

LOAD DATA INFILE "/home/paul/clientdata.csv"
INTO TABLE CSVImport
COLUMNS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '"'
LINES TERMINATED BY '\n'
IGNORE 1 LINES;

除非你分析(手动的，视觉的，…)你的CSV和找到哪个字符用于转义。有时是“\”。但如果你没有，就不要使用它。

2018-12-17 10:57:11

当执行MySQL查询导入CSV时，我得到了错误错误代码:1290。MySQL服务器使用——secure-file-priv选项运行，因此无法执行此语句。

所以我把文件移到安全文件位置

LOAD DATA INFILE 'C:/ProgramData/MySQL/MySQL Server 8.0/Uploads/Orders.csv'   
INTO TABLE orderdetails.orders 
FIELDS TERMINATED BY ','  
 ENCLOSED BY '"'
 LINES TERMINATED BY '\n'
 IGNORE 1 ROWS

文件的位置是“C:/ProgramData/MySQL/MySQL Server 8.0/Uploads/Orders.csv”，这是因为，我将我的CSV文件移动到“secure_file_priv”位置，否则我就会得到上面的错误

你可以通过查询SHOW VARIABLES LIKE "secure_file_priv"来获得你的secure_file_priv;

来源:导入CSV文件到MySQL(查询或使用Workbench)

2022-07-30 12:30:11

PHP查询导入csv文件到mysql数据库

$query = <<<EOF
            LOAD DATA LOCAL INFILE '$file'
             INTO TABLE users
             FIELDS TERMINATED BY ','
             LINES TERMINATED BY '\n'
             IGNORE 1 LINES
            (name,mobile,email)
    EOF;
if (!$result = mysqli_query($this->db, $query))
   {
        exit(mysqli_error($this->db));
   }

** CSV文件样本数据**

name,mobile,email
Christopher Gritton,570-686-3439,ChristopherKGritton@inbound.plus
Brandon Wilson,541-309-5149,BrandonMWilson@inbound.plus
Craig White,516-795-8065,CraigJWhite@inbound.plus
David Whitney,713-214-3966,DavidCWhitney@inbound.plus

2016-09-28 09:02:01

mysql命令行在导入时容易出现太多问题。你可以这样做:

使用excel编辑标题名称，使其没有空格另存为。csv 使用免费的Navicat Lite Sql浏览器导入并自动创建一个新表(给它一个名字) 打开新表，为ID插入一个主要的汽车编号列根据需要更改列的类型。完成了!

2012-09-25 00:53:44

如何将CSV文件导入MySQL表?

推荐文章

最新文章

标签