我正在学习MySQL，并尝试使用LOAD DATA子句。当我使用它时，如下所示:
LOAD DATA INFILE "text.txt" INTO table mytable;
我得到了以下错误:
MySQL服务器正在使用——secure-file-priv选项运行，所以它不能执行这条语句
如何解决这个错误?
我已经检查了关于相同错误信息的另一个问题，但仍然找不到解决方案。
我使用的是MySQL 5.6
当前回答
我创建了一个NodeJS导入脚本，如果你正在运行NodeJS，你的数据是以下形式(双引号+逗号和\n新行)
INSERT INTO <your_table> VALUEs( **CSV LINE **)
这个配置为在http://localhost:5000/import上运行。
我逐行创建查询字符串
"city","city_ascii","lat","lng","country","iso2","iso3","id"
"Tokyo","Tokyo","35.6850","139.7514","Japan","JP","JPN","1392685764",
...
server.js
const express = require('express'),
cors = require('cors'),
bodyParser = require('body-parser'),
cookieParser = require('cookie-parser'),
session = require('express-session'),
app = express(),
port = process.env.PORT || 5000,
pj = require('./config/config.json'),
path = require('path');
app.use(bodyParser.json());
app.use(cookieParser());
app.use(cors());
app.use(
bodyParser.urlencoded({
extended: false,
})
);
var Import = require('./routes/ImportRoutes.js');
app.use('/import', Import);
if (process.env.NODE_ENV === 'production') {
// set static folder
app.use(express.static('client/build'));
app.get('*', (req, res) => {
res.sendFile(path.resolve(__dirname, 'client', 'build', 'index.html'));
});
}
app.listen(port, function () {
console.log('Server is running on port: ' + port);
});
ImportRoutes.js
const express = require('express'),
cors = require('cors'),
fs = require('fs-extra'),
byline = require('byline'),
db = require('../database/db'),
importcsv = express.Router();
importcsv.use(cors());
importcsv.get('/csv', (req, res) => {
function processFile() {
return new Promise((resolve) => {
let first = true;
var sql, sqls;
var stream = byline(
fs.createReadStream('../PATH/TO/YOUR!!!csv', {
encoding: 'utf8',
})
);
stream
.on('data', function (line, err) {
if (line !== undefined) {
sql = 'INSERT INTO <your_table> VALUES (' + line.toString() + ');';
if (first) console.log(sql);
first = false;
db.sequelize.query(sql);
}
})
.on('finish', () => {
resolve(sqls);
});
});
}
async function startStream() {
console.log('started stream');
const sqls = await processFile();
res.end();
console.log('ALL DONE');
}
startStream();
});
module.exports = importcsv;
Db.js是配置文件
const Sequelize = require('sequelize');
const db = {};
const sequelize = new Sequelize(
config.global.db,
config.global.user,
config.global.password,
{
host: config.global.host,
dialect: 'mysql',
logging: console.log,
freezeTableName: true,
pool: {
max: 5,
min: 0,
acquire: 30000,
idle: 10000,
},
}
);
db.sequelize = sequelize;
db.Sequelize = Sequelize;
module.exports = db;
免责声明:这不是一个完美的解决方案-我只是发布给那些在时间轴下有大量数据要导入的开发人员，并且遇到了这个荒谬的问题。我在这方面损失了很多时间，我希望其他开发人员也能节省同样的时间。
其他回答
如果文件是本地的，请在命令中使用local
LOAD DATA LOCAL INFILE "text.txt" INTO table mytable;
我用命令中的LOCAL选项解决了这个问题:
LOAD DATA LOCAL INFILE "text.txt" INTO TABLE mytable;
你可以在这里找到更多信息。
上的客户端程序读取文件 客户端主机和发送到服务器。该文件可以作为一个完整的 路径名称，以指定其确切位置。如果给出一个相对路径 名称时，名称将相对于所在的目录进行解释 客户端程序启动。
这为我工作(有额外的问题，不能使用本地与我当前的MySQL版本在语句LOAD DATE INFILE…)
sudo /usr/local/mysql/support-files/mysql.server start --secure-file-priv='' --local-infile
上述方法适用于我的机器上的给定路径;你可能需要调整你的路线。
然后使用:
mysql -u root -p
重要的一点是，您应该在MySQL数据文件夹中有CSV。在我的机器中，它位于:/usr/local/mysql-8.0.18-macos10.14-x86_64/data
如果需要在数据文件夹中删除CSV，可以更改文件夹权限。
设置: macOS Catalina 10.15.5版本 MySQL 8.0.18版本
关于secure_file_priv的解释如下:
https://dev.mysql.com/doc/refman/5.7/en/server-system-variables.html#sysvar_secure_file_priv
下面是LOAD DATA的解释:
https://dev.mysql.com/doc/refman/8.0/en/load-data.html
在我的例子中，使用的是官方Docker镜像中的MySQL，所以我需要弄清楚如何设置secure_file_priv。
为了更好地理解什么是secure_file_priv，我阅读了上面的链接; 并阅读MySQL的DockerHub不得不说，https://hub.docker.com/_/mysql
了解(docker) mysql默认值:
$ docker run -it --rm mysql --verbose --help
Variables (--variable-name=value)
and boolean options {FALSE|TRUE} Value (after reading options)
----------------------------------------- -----------------------------
...
local-infile FALSE
...
secure-file-priv NULL
...
事实上，(在容器内部)配置文件说:
root@a2b1e0c46541:/# cat /etc/mysql/my.cnf
#
# (...license...)
#
# The MySQL Server configuration file.
#
# For explanations see
# http://dev.mysql.com/doc/mysql/en/server-system-variables.html
[mysqld]
pid-file = /var/run/mysqld/mysqld.pid
socket = /var/run/mysqld/mysqld.sock
datadir = /var/lib/mysql
secure-file-priv= NULL
# Custom config should go here
!includedir /etc/mysql/conf.d/
使用官方图像(如README中解释的那样):
$ docker run --name mysql -e MYSQL_ROOT_PASSWORD=secret -d mysql \
--secure_file_priv=/data
如果你想允许LOCAL INFILE加载，还需要定义选项local_infile=TRUE。
现在你应该能够加载数据INFILE '/ DATA / DATA .csv'到表some_table。
注意:在同样的任务中——一旦“INFILE”的事情被解决(如上)——我在我的CSV数据中有空值的问题，对此的答案(和问题)非常有帮助:https://stackoverflow.com/a/5968530/687896。
我将LOCAL添加到命令中，但它产生了另一个问题:
Loading local data is disabled - this must be enabled on both the client and server sides
为了解决这个问题，我在这里简单地执行了三个步骤
