03 2023 档案
摘要:odps Spark任务增加两个配置参数:spark.hadoop.odps.cupid.history.server.address = 127.0.0.1:18080spark.hadoop.odps.cupid.proxy.end.point = sparkui.bjdc-1.odps.ops
阅读全文
摘要:本文基于达梦数据库DM8进行技术验证,验证通过DM8向ODPS同步数据的可行性。 前期准备:需要在项目空间中配置DM8数据库的数据源,这里不再描述。需要注意的是:由于JDBC连接中需要使用数据库名,这里只需要配置用户名即可,否则会报schema不合理的问题。 1.达梦数据库创建源表 --创建测试表
阅读全文