MySqlBulkLoader批量上传遇到的问题和解决方法
最近用 MySqlBulkLoader 向MySql数据库批量上传数据遇到了些问题,做下记录
问题1:如图
可能原因:1. 版本不合,使用的MySql版本和引用的mysql.data 版本不和
解决方案:用nuget将mysql.data升级到对应版本,如果是MySql8.0,就将mysql.data升级到最新版即可(亲测)。
2. 本地导入文件的参数没有打开
解决方案:流程:1)服务器进入mysql ,输入 show variables like '%local%';
查看local_infile状态,如果如下图是 off ,需要改成 on
输入set global local_infile=1;
2) 客户端在连接mysql时,要设置AllowLoadLocalInfile为true
问题2:升级后,无论连接本地还是远程的数据库都有这问题
The MySQL server is running with the --secure-file-priv option so it cannot execute this statement
原因:secure_file_prive路径不对,数据导入或导出被限制
对应设置及结果如下:
secure_file_prive=null -- 限制mysqld 不允许导入导出
secure_file_priv=/tmp/ -- 限制mysqld的导入导出只能发生在/tmp/目录下
secure_file_priv='' -- 不对mysqld 的导入 导出做限制
解决方案:将my.ini配置文件中修改或添加为secure_file_priv=''
注意:此处修改的是装有MySql的服务器上或电脑上的配置
流程:
1. win+R 输入 Cmd 以管理员身份运行
2. 输入cd + mySql安装文件夹里的bin文件夹路径,例如
3. 输入 mysql -hlocalhost -uroot -p +密码 回车,进入mysql数据库
4. 输入 show variables like '%secure%'; 查看secure-file-priv的当前值
一般出现这种问题,路径肯定不合适
5. 输入 show global variables like "%datadir%";
查找my.ini文件的位置
6. 找到my.ini,修改或增加 secure_file_priv=''
7. 再批量上传数据,如果出现报错 unknown variable 'secure_file_priv',可能是因为secure_file_priv=""没有加在 [mysqld] 下面。
正确修改my.ini如下:
7. secure_file_priv的值修改不会立即生效,在修改secure_file_priv的值之后,需要重启MySQL服务。
具体操作:win+R运行cmd,输入services.msc,启动服务,查找mysql服务,将其停止,然后再启动,也就是重启操作,再到cmd中查看secure_file_priv的值修改就生效了(mysql->SHOW VARIABLES LIKE "secure_file_priv";)
8. 解决;
问题3:向服务器上的MySql数据库上传数据,发现临时文件已经存在,却找不到
File 'C:\\Users\\hao.zhang\\Desktop\\DataBase\\DataBase\\bin\\Debug\\11.txt' not found (OS errno 2 - No such file or directory)
原因:因为项目中将数据集生成的文件保存在了项目所在的服务器,另一个服务器上的数据库在插入数据操作时,找不到数据集文件,导致的错误
解决方案:MySqlBulkLoader中要设置Local = true
读取本地文件,进行导入。