摘要: 整体架构 技术框架 1. 配置表主题 2. 配置表层级 3. 数据仓库分层 1. 原始数据层ODS层搭建 表的位置 使用DataHub Connector将DataHub中的数据推送到MaxCompute中 创建DataConnector 数据成功加载 2. DWD层搭建 日志格式分析 自定义UDT 阅读全文
posted @ 2022-05-19 23:05 jsqup 阅读(142) 评论(0) 推荐(0) 编辑
摘要: 1. JDK安装(见文档) 2. 日志生产(见文档) 在文档中显示 // 启动Flume进程,输出端设置为控制台 /opt/module/flume/bin/flume-ng agent -n a1 -c /opt/module/flume/conf/ -f /opt/module/flume/co 阅读全文
posted @ 2022-05-19 19:58 jsqup 阅读(41) 评论(0) 推荐(0) 编辑