Datax 从Oracle导入数据到Hive

需要将oracle的数据导入到Hive上去,其实导入到hdfs和导入到hive的配置差不多

 

 

 

 

查看集群上的文件

附上截图配置文件代码

复制代码
{
  "job": {
    "setting": {
      "speed": {
        "channel": 3,
        "byte": 1048576
      },
      "errorLimit": {
        "record": 0,
        "percentage": 0.02
      }
    },
    "content": [
      {
        "reader": {
          "name": "oraclereader",
          "parameter": {
            "username": "8nm05+Fc1",
            "password": "ZVb8HIdO2",
            "splitPk": "",
            "connection": [
              {
                "querySql": [
                  "select trade_no,RESP_MSG from  vxppu.trade_detail_his"
                ],
                "jdbcUrl": [
                  "jdbc:oracle:thin:@//192.168.36.87:1521/uonbip"
                ]
              }
            ]
          }
        },
        "writer": {
          "name": "hdfswriter",
          "parameter": {
            "defaultFS": "hdfs://192.168.61.142:9000",
            "fileType": "text",
            "path": "/hive/temp",
            "fileName": "tmp_trade",
            "writeMode": "append",
            "fieldDelimiter": ",",
            "column": [
              {
                "name": "trade_no",
                "type": "string"
              },
              {
                "name": "org_id",
                "type": "string"
              }
            ]
          }
        }
      }
    ]
  }
}
复制代码

 

posted @   欣欣姐  Views(1966)  Comments(1Edit  收藏  举报
编辑推荐:
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
· SQL Server 2025 AI相关能力初探
· Linux系列:如何用 C#调用 C方法造成内存泄露
· AI与.NET技术实操系列(二):开始使用ML.NET
阅读排行:
· 无需6万激活码!GitHub神秘组织3小时极速复刻Manus,手把手教你使用OpenManus搭建本
· C#/.NET/.NET Core优秀项目和框架2025年2月简报
· Manus爆火,是硬核还是营销?
· 终于写完轮子一部分:tcp代理 了,记录一下
· 【杭电多校比赛记录】2025“钉耙编程”中国大学生算法设计春季联赛(1)
点击右上角即可分享
微信分享提示