kettle从入门到精通 第三十四课 kettle 错误处理

1、我们在平常写应用程序的时候，需要主动捕获异常或者错误，不然程序有可能异常退出。同样kettle 也支持异常或者错误处理，下图展示的是在批量插入数据的时候捕获异常，如唯一健冲突，死锁等，并将错误信息
保存到表里面，方便后续邮件预警和排查问题。

2、在需要异常处理的步骤上面右键，点击定义错误处理，如下图所示

 

3、设置错误处理属性

目标步骤：错误处理信息流向的下一个步骤，如表输出或者写日志等。

启用错误处理：可以关闭和开启该步骤的错误处理

错误数列名：自定义名称，如ERR_NUM

错误描述列名：自定义名称，如ERR_DESC

错误列列名：自定义名称，如ERR_NAME

错误编码列名：自定义名称，如ERR_CODE

4、把错误信息入库是个不错的选择，方便后续排查问题且可以根据错误信息表进行邮件预警，如下图所示。

5、创建一个表rds_error_records用于存储错误信息，如下脚步供参考

CREATE TABLE `rds_error_records` (
  `ID` int NOT NULL AUTO_INCREMENT COMMENT '唯一编号',
  `TABLE_NAME` varchar(50) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '表名',
  `SERIAL_NO` varchar(50) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '错误数据唯一编号',
  `ERR_NUM` varchar(20) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '错误行',
  `ERR_NAME` varchar(20) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '错误名称',
  `ERR_DESC` longtext CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '错误描述',
  `ERR_CODE` varchar(20) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci DEFAULT NULL COMMENT '错误码',
  `CREATE_TIME` datetime(0) NULL DEFAULT  CURRENT_TIMESTAMP COMMENT '创建时间 ',
  PRIMARY KEY (`ID`) USING BTREE,
  index  (CREATE_TIME)
) ENGINE=InnoDB AUTO_INCREMENT=182 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_general_ci ROW_FORMAT=DYNAMIC COMMENT='数据同步错误记录表';