【YashanDB知识库】oracle dblink varchar类型查询报错记录
问题单:Oracle DBLINK查询崖山DB报错
oracle服务器上ODBC安装
unixodbc安装:yum -y install unixODBC
mysql
配置安装对应版本的odbc:
myodbc-installer -d -a -n "MySQL8.0" -t "DRIVER=/home/oracle/tools/mysql-connector-odbc-8.0.20/lib/libmyodbc8w.so;SETUP=/home/oracle/tools/mysql-connector-odbc-8.0.20/lib/myodbc8S.so"
yashandb
安装yasdb-odbc
安装yasdb-client
配置odbc驱动:
sudo vi /etc/odbcinst.ini
[YashanDB] Description=ODBC for yashanDB
Driver=/home/oracle/xp/yashandb-odbc/libyas_odbc.so
Setup=/home/oracle/xp/yashandb-odbc/libyas_odbc.so
Driver64=/home/oracle/xp/yashandb-odbc/libyas_odbc.so
Setup64=/home/oracle/xp/yashandb-odbc/libyas_odbc.so FileUsage=1
[ODBC]
Trace=NO/YES #yes打开odbc日志
TraceFile=/home/oracle/xp/odbc.log
添加环境变量:
vi .bashrc
export LD_LIBRARY_PATH=LD_LIBRARY_PATH:/home/oracle/xp/yashandb-odbc
配置数据源
sudo vi /etc/odbc.ini
[YASDBODBC]
Description = YASODBC
Driver = YashanDB
SERVER = 192.168.18.207 PORT = 8688
USER = sys
PWD = yasdb_123
[MYSQLDB]
Description = MySQL ODBC 5.0 Unicode Driver
Driver = MySQL8.0
Server = 192.168.7.134
Database = zabbix
Port = 3306
USER = zabbix
Password = 123456
Option = 3
CHARSET = UTF8
配置oracle dblink环境
监听文件配置
/data/app/oracle/product/19.3/dbhome_1/network/admin
vi listener.ora
新增:
SID_LIST_LISTENER =
(SID_LIST =
(SID_DESC =
(SID_NAME = YASDBODBC)
(ORACLE_HOME = /data/app/oracle/product/19.3/dbhome_1)
(PROGRAM = dg4odbc)
)
)
SID_LIST_LISTENER =
(SID_LIST =
(SID_DESC =
(SID_NAME = MYSQLDB)
(ORACLE_HOME = /data/app/oracle/product/19.3/dbhome_1)
(PROGRAM = dg4odbc)
)
)
坑1:
配置这个后,oracle的远程连接报错。
修改如下:
listener.ora有三个部分
详解各个属性:
1、LISTENER部分包含协议地址列表,每个实例一个入口,监听名称,可以配置多个监听,多个监听的端口号要区分开来
2、SID_LIST_LISTENER部分标识全局数据库名称、标识监听程序正在服务的每个实例的Oracle软件主目录以及实例或SID。
3、SID_LIST描述用于静态数据库注册、保持和以前的版本兼容性以及供Oracle Enterprise Manager使用,因为我本地有三个数据库
把SID_DESC 放到SID_LIST_LISTENER中
SID_LIST_LISTENER =
(SID_LIST =
(SID_DESC =
(GLOBAL_DBNAME = oracledb)
(ORACLE_HOME = /data/app/oracle/product/19.3/dbhome_1)
(SID_NAME = oracledb)
)
(SID_DESC =
(SID_NAME = YASDBODBC)
(ORACLE_HOME = /data/app/oracle/product/19.3/dbhome_1)
(PROGRAM = dg4odbc)
)
(SID_DESC =
(SID_NAME = MYSQLDB)
(ORACLE_HOME = /data/app/oracle/product/19.3/dbhome_1)
(PROGRAM = dg4odbc)
)
)
配置tns文件
vi tnsnames.ora
新增:
YASDBODBC =
(DESCRIPTION =
(ADDRESS_LIST =
(ADDRESS = (PROTOCOL = TCP)(HOST = 192.168.7.134)(PORT = 1521))
)
(CONNECT_DATA =
(SERVICE_NAME = YASDBODBC)
)
(HS = OK)
)
MYSQLDB =
(DESCRIPTION =
(ADDRESS_LIST =
(ADDRESS = (PROTOCOL = TCP)(HOST = 192.168.7.134)(PORT = 1521))
)
(CONNECT_DATA =
(SERVICE_NAME = MYSQLDB)
)
(HS = OK)
)
配置odbc监听
cd /data/app/oracle/product/19.3/dbhome_1/hs/admin
mysql
添加文件:
touch initMYSQLDB.ora
vim initMYSQLDB.ora
HS_FDS_CONNECT_INFO = MYSQLDB
HS_FDS_TRACE_LEVEL = debug
HS_FDS_SHAREABLE_NAME = /usr/lib64/libodbc.so
HS_LANGUAGE = AMERICAN_AMERICA.US7ASCII
HS_NLS_NCHAR = UCS2
#HS_FDS_SUPPORT_STATISTICS = FALSE
set ODBCINI= /etc/odbc.ini
yashandb
touch initYASDBODBC.ora
vim initYASDBODBC.ora
HS_FDS_CONNECT_INFO = YASDBODBC
HS_FDS_TRACE_LEVEL = debug
HS_FDS_SHAREABLE_NAME = /usr/lib64/libodbc.so
HS_LANGUAGE = AMERICAN_AMERICA.US7ASCII
HS_NLS_NCHAR = UCS2
#HS_FDS_SUPPORT_STATISTICS = FALSE
set ODBCINI= /etc/odbc.ini
重启监听
lsnrctl stop
lsnrctl start
lsnrctl status
创建链接异构数据库连接
在yashandb和mysql上建表如下:
drop table T1;
create table T1(c1 varchar(2001) ,c2 int,c3 double);
insert into T1 values('book1',51,1),('book2',22,2),('book3',66,3),(NULL,71,4),('book4',NULL,5);
mysql
drop database link TEST_MYSQL;
create database link TEST_MYSQL connect to "zabbix" IDENTIFIED by "123456" using 'MYSQLDB' ;
SELECT * FROM T1@TEST_MYSQL;
SELECT * FROM T1@TEST_MYSQL where "c3"=1 ;
SELECT * FROM T1@TEST_MYSQL where "c2"=51 ;
SELECT * FROM T1@TEST_MYSQL where cast("c1" as varchar(200))='book1';
yashandb
drop database link YASDBODBC_TEST;
create database link YASDBODBC_TEST connect to "sys" identified by "yasdb_123" using 'YASDBODBC';
SELECT * FROM T1@YASDBODBC_TEST;
SELECT * FROM T1@YASDBODBC_TEST where c1='book1';
SELECT * FROM T1@YASDBODBC_TEST where c2=51 ;
SELECT * FROM T1@YASDBODBC_TEST where c3=1 ;
问题原因
dblink使用odbc连接其它数据库,如yashandb、mysql等
● 把其它数据库的varchar类型会变成oralce中的nvarchar2类型,如下组图1。
● nvarchar2类型2个字节存储一个字符,超过varchar(2000)的字段类型因为超过了4000个字节,在oracle中变成了long类型,如下组图2。
● long类型不能在where、group by、order by中使用。
问题复现
组图1:
mysql中的表类型:
oracle中的表类型:
查询正常:
组图2:
mysql中的表类型:
oracle中的表类型:
查询报错:
oracle long类型限制
-
LONG数据类型中存储的是可变长字符串,最大长度限制是2GB。
-
对于超出一定长度的文本,基本只能用LONG类型来存储,数据字典中很多对象的定义就是用LONG来存储的。
-
LONG类型主要用于不需要作字符串搜索的长串数据,如果要进行字符搜索就要用varchar2类型。
-
很多工具,包括SQLPlus,处理LONG 数据类型都是很困难的。
-
LONG数据类型的使用中,要受限于磁盘的大小。
能够操作LONG的SQL语句:
-
Select语句
-
Update语句中的SET语句
-
Insert语句中的VALUES语句
限制:
-
一个表中只能包含一个 LONG 类型的列。
-
不能索引LONG类型列。
-
不能将含有LONG类型列的表作聚簇。
-
不能在SQLPlus中将LONG类型列的数值插入到另一个表格中,如insert into …select。
-
不能在SQL*Plus中通过查询其他表的方式来创建LONG类型列,如create table as select。
-
不能对LONG类型列加约束条件(NULL、NOT NULL、DEFAULT除外),如:关键字列(PRIMARY KEY)不能是 LONG 数据类型。
-
LONG类型列不能用在Select的以下子句中:where、group by、order by,以及带有distinct的select语句中。
-
LONG类型列不能用于分布查询。
-
PL/SQL过程块的变量不能定义为LONG类型。
-
LONG类型列不能被SQL函数所改变,如:substr、instr。 因为long类型的数值不能用insert into … select的方法插入,故我们要分两步走,先插入其它字段,最后再插入long类型字段,这可以通过过程来实现.
参考:oracle里long类型的总结_oracle long-CSDN博客
char类型区别
char
1、char的长度是固定的。比如说,你定义了char(20),即使你你插入abc,不足二十个字节,数据库也会在abc后面自动加上17个空格,以补足二十个字节;
2、char是区分中英文的。中文在char中占两个字节,而英文占一个,所以char(20)你只能存20个字母或10个汉字。
char适用于长度比较固定的,一般不含中文的情况。
varchar/varchar2
1、varchar是长度不固定的。比如说,你定义了varchar(20),当你插入abc,则在数据库中只占3个字节。
2、varchar同样区分中英文。这点同char。
3、varchar2基本上等同于varchar。它是oracle自己定义的一个非工业标准varchar,不同在于,varchar2用null代替varchar的空字符串。
varchar/varchar2适用于长度不固定的,一般不含中文的情况。
nvarchar/nvarchar2
1、nvarchar和nvarchar2是长度不固定的;
2、nvarchar不区分中英文。比如说:你定义了nvarchar(20),你可以存入20个英文字母/汉字或中英文组合,这个20定义的是字符数而不是字节数;
3、nvarchar2基本上等同于nvarchar,不同在于nvarchar2中存的英文字母也占两个字节。
大多数情况下,ORACLE中的国家字符集是默认的,以下结论成立:
如果要省存储空间,建表时,字段内容里如果中文占了大多数,就用nvarchar2类型;如果内容是英文和数字为主的字符串,就用varchar2类型。
注意:
-
ORACLE中的国家字符集,只有在数据类型为NCHAR/NVARCHAR/NCLOB时才会被使用,也就是前面带N(national)的字符类型;
-
ORACLE默认国家字符集为AL16UTF16,完全对应UNICODE的UTF-16标准(有别于数据库字符集)
-
ORACLE中的UTF-8,不是标准的UTF-8,而是CESU-8。
参考:Oracle字段类型char、varchar2、nvarchar2的区别与使用_oracle varchar2-CSDN博客
规避方法
varchar最大支持长度为4000字节,通过参数MAX_STRING_SIZE控制 MAX_STRING_SIZE默认为STANDARD,修改成EXTENDED支持32K
修改步骤:
sql> shutdown immediate;
sql> startup upgrade;
sql> alter system set max_string_size=EXTENDED scope=both;
sql> @?/rdbms/admin/utl32k.sql
sql> startup;
sql> @?/rdbms/admin/utlrp.sql