MySqlBulkLoader批量上传遇到的问题和解决方法

最近用 MySqlBulkLoader 向MySql数据库批量上传数据遇到了些问题,做下记录

 

问题1:如图

可能原因:1. 版本不合,使用的MySql版本和引用的mysql.data 版本不和

                      解决方案:用nuget将mysql.data升级到对应版本,如果是MySql8.0,就将mysql.data升级到最新版即可(亲测)。

                  2. 本地导入文件的参数没有打开

                      解决方案:流程:1)服务器进入mysql ,输入 show variables like '%local%';

                                                        查看local_infile状态,如果如下图是 off ,需要改成 on

   

 

                                         

     输入set global local_infile=1;

    

 

 

                                                2) 客户端在连接mysql时,要设置AllowLoadLocalInfile为true

 

 

 

问题2:升级后,无论连接本地还是远程的数据库都有这问题

The MySQL server is running with the --secure-file-priv option so it cannot execute this statement

 

 

原因:secure_file_prive路径不对,数据导入或导出被限制

对应设置及结果如下:

secure_file_prive=null   -- 限制mysqld 不允许导入导出

secure_file_priv=/tmp/   -- 限制mysqld的导入导出只能发生在/tmp/目录下

secure_file_priv=''         -- 不对mysqld 的导入 导出做限制

 

解决方案:将my.ini配置文件中修改或添加为secure_file_priv=''

注意:此处修改的是装有MySql的服务器上或电脑上的配置

流程:

         1. win+R 输入 Cmd 以管理员身份运行

         2. 输入cd + mySql安装文件夹里的bin文件夹路径,例如

         3. 输入   mysql -hlocalhost -uroot -p +密码  回车,进入mysql数据库

         4. 输入  show variables like '%secure%';    查看secure-file-priv的当前值

 

 

            一般出现这种问题,路径肯定不合适

         5. 输入  show global variables like "%datadir%";  查找my.ini文件的位置

         6. 找到my.ini,修改或增加   secure_file_priv=''

         7. 再批量上传数据,如果出现报错 unknown variable 'secure_file_priv',可能是因为secure_file_priv=""没有加在 [mysqld] 下面。

             正确修改my.ini如下:

    

 

 

 

    

 

 

 

 

 

 

 

 

 

 

 

 

          7. secure_file_priv的值修改不会立即生效,在修改secure_file_priv的值之后,需要重启MySQL服务。

             具体操作:win+R运行cmd,输入services.msc,启动服务,查找mysql服务,将其停止,然后再启动,也就是重启操作,再到cmd中查看secure_file_priv的值修改就生效了(mysql->SHOW VARIABLES LIKE "secure_file_priv";)

         8. 解决;

 

问题3:向服务器上的MySql数据库上传数据,发现临时文件已经存在,却找不到

File 'C:\\Users\\hao.zhang\\Desktop\\DataBase\\DataBase\\bin\\Debug\\11.txt' not found (OS errno 2 - No such file or directory)

 

 

原因:因为项目中将数据集生成的文件保存在了项目所在的服务器,另一个服务器上的数据库在插入数据操作时,找不到数据集文件,导致的错误

解决方案:MySqlBulkLoader中要设置Local = true 读取本地文件,进行导入。

 

posted @ 2021-03-10 08:58  寻找迷途的羔羊  阅读(713)  评论(0编辑  收藏  举报