Shell_Oracle Erp和其他系统Interface资料传输通过Shell进行控制（案例）

2014-06-26 Created By BaoXinjian

一、摘要

---

当不同的系统资料进行交换，可以很多种方式，如MQ，DBLink

当接触一些信息安全比较严的项目，很多公司都是采用unix shell直接进行抛转文件的方式进行

使用unix shell抛传文件的时，就必须区分哪些文件已被读取，哪些文件未被读取，读取成功之后文件如何处理，读取失败后的文件如何处理

 

之前做的一个保险项目，其处理不同系统之间所有的interface data资料，都是通过unix shell去控制，其安全性会比较高

本文只是介绍程式的基本结构，不纠结与语法，真正的控制Shell文件会涉及到跟多的部分，如验证，初始化环境变量等等

Step1. 通过一个unix shell去读取一个文件夹interface下所有的文件名，

Step2. 将其插入到一个contorl table中，插入之前先判断该文件名是否存在，如果存在就不再插入，避免重复记录

Step3. 通过utl_file读取contorl table中未被处理的data file

Step4. 读取文件成功后，将该文件transfer到另一个文件夹success

Step5. 读取文件失败后，将该文件transfer到另一个文件夹failed

 

二、案例实现

---

案例：从另外系统抛传interface dat files资料，并存放在/home/applvis/bts/interface中，通过unix shell去控制文件读取

Step1. 建立control table，用以测试unix shell将未读取的文件名存放至该表中

create table bxj_interface_control_tb(
batch_id number,
file_seq number,
file_name varchar2(240),
record_count number,
success_record number,
failure_record number,
process_status varchar2(50),
request_id number,
user_id number,
user_name varchar2(240),
creation_date date
)

create sequence bxj_batch_id_sq start with 1000

Step2. 确认存放interface dat资料文件夹下有5个文件，所以当unix shell处理后，这个5个文件必须存放至contorl表中

Step3. 确认存在的三个interface存放dat资料、log存放Shell运行的日志、sql存放SQL执行文件

Step4. 最关键的一步，建立Unix Shell，本人不是DBA出生，虽然学过Bash语法，但是不省精通，大家凑活着看

#/bin/bash  
# +--------------------------------------------+  
# + An example of calling host concurrent      +   
# + Author: Gavin.Bao                          +                                
# +--------------------------------------------+  
#  
# ---------------------------------  
#  Define variable
# ---------------------------------
export ORA_USER_PASS=$1
export ORA_USER_ID=$2
export ORA_LOGIN_NAME=$3
export ORA_REQUEST_ID=$4

export FOLDER_PATH="/home/applvis/bts/interface/"
export INTERFACE_PATH="/home/applvis/bts/interface"
export SQL_PATH="/home/applvis/bts/sql"
export LOG_PATH="/home/applvis/bts/log"

# -------------------------------------------
#  Loop the file name and store it into array
# -------------------------------------------
x=0        
for filename in ${FOLDER_PATH}*;
do   
  array[$x]=`basename $filename`  
  let "x+=1"
done

for interface_name in ${array[*]}
do
  echo $interface_name
done

# ---------------------------------  
#  Prepare plsql script  
# ---------------------------------
echo "set serveroutput on size 1000000" > $SQL_PATH/bxjinterface.sql  
echo "set feed off" >> $SQL_PATH/bxjinterface.sql  
echo "declare" >> $SQL_PATH/bxjinterface.sql
echo "  n_count number;" >> $SQL_PATH/bxjinterface.sql
echo "  n_batch_id number := &1;" >> $SQL_PATH/bxjinterface.sql
echo "  v_file_name varchar2(240) := '&2';" >> $SQL_PATH/bxjinterface.sql
echo "begin" >> $SQL_PATH/bxjinterface.sql  
echo "  select count(*) into n_count " >> $SQL_PATH/bxjinterface.sql  
echo "    from bxj_interface_control_tb where file_name = v_file_name;" >> $SQL_PATH/bxjinterface.sql  
echo "  if (n_count = 0) then" >> $SQL_PATH/bxjinterface.sql
echo "    insert into bxj_interface_control_tb " >> $SQL_PATH/bxjinterface.sql  
echo "    values (bxj_batch_id_sq.nextval,n_batch_id,v_file_name,0,0,0,'N',$ORA_REQUEST_ID,$ORA_USER_ID,'$ORA_LOGIN_NAME',sysdate);" >>$SQL_PATH/bxjinterface.sql
echo "  end if;" >>$SQL_PATH/bxjinterface.sql
echo "  commit;" >>$SQL_PATH/bxjinterface.sql
echo "  dbms_output.put_line('Excuted Sucessfully.');" >> $SQL_PATH/bxjinterface.sql  
echo "exception when others then" >> $SQL_PATH/bxjinterface.sql  
echo "  rollback;" >> $SQL_PATH/bxjinterface.sql  
echo "  dbms_output.put_line('Executed Failed');" >> $SQL_PATH/bxjinterface.sql  
echo "  dbms_output.put_line('SQLCODE='||SQLCODE);" >> $SQL_PATH/bxjinterface.sql  
echo "  dbms_output.put_line('SQLERRM='||SQLERRM);" >> $SQL_PATH/bxjinterface.sql  
echo "end;" >> $SQL_PATH/bxjinterface.sql  
echo "/" >> $SQL_PATH/bxjinterface.sql

# -------------------------------------------  
#  Execute plsql script and generate the log
# -------------------------------------------  
if [ -s $SQL_PATH/bxjinterface.sql ]; then
  echo -e "Running SQL script to find out bdump directory... \n"   
  length=${#array[@]}
  echo $length
  for((i=0;i<$length;i++))
  do
    $ORACLE_HOME/bin/sqlplus -s apps/apps >> $LOG_PATH/bxjinterface.log << EOF  
    @$SQL_PATH/bxjinterface.sql $i '${array[$i]}'
EOF
done
fi

# --------------------------------  
#  show log file
# --------------------------------  
echo "Check the reslut "
echo "------------------------"
cat $LOG_PATH/bxjinterface.log

echo "bxj shell end"

 

三、案例测试

---

Test1. 调用建立的Shell文件，读取文件名

 Test2. Unix Shell执行时，产生的Log文件

Test2. Unix Shell执行时，产生的SQL文件

Test3. 查看Contorl table中是否存在5个文件名