08 2018 档案

摘要:直接介绍重点: 常用的操作是导航栏的逐句与断点: 添加断点:调试->切换断点 单步运行:调试->逐句 查看变量的窗口:视图->本地窗口 阅读全文
posted @ 2018-08-30 17:09 ---江北 阅读(2053) 评论(0) 推荐(0) 编辑
摘要:一、数据开发 1.任务开发 新建表 野路子可以直接新建一个任务,粘贴DDL,手动运行任务即可完成建表 正常应当是在“数据管理”->数据表管理中建表: 支持可视化建表和DDL建表(配合之前的宏,建表还是很快的) 当然,这种方式的局限也很明显,一是稍显繁琐,二是不能同时运行多个任务,三是不能保存建表脚本 阅读全文
posted @ 2018-08-27 17:45 ---江北 阅读(8553) 评论(0) 推荐(0) 编辑
摘要:一、概述 DataWorks数据工场,是MaxComputer的可视化开发平台,一站式开发、管理界面 1.功能概述 1.强大调度:支持分钟到月的调度 2.多种任务:支持ODPS、SHELL等多种任务 3.可视化开发:B/S架构的可视化开发界面,简单易上手 2.基本概念 1.任务 0个或多个表作为输入 阅读全文
posted @ 2018-08-26 12:00 ---江北 阅读(29086) 评论(0) 推荐(0) 编辑
摘要:1.分段调试 面对长的SQL,出错时一般直接看定位的行号,有时候不出错但是没数据时,应该尝试分段调试,很长的SQL嵌套很多的子查询时,一个一个子查询进行分别调试,看哪一步子查询出了问题,层层推进 2.日志查看 通常情况下,日志都是很重要的指示。有时候一些莫名其妙的错误时,错误信息看得懂却始终调不通时 阅读全文
posted @ 2018-08-25 16:40 ---江北 阅读(1920) 评论(0) 推荐(0) 编辑
摘要:一、概述 1.是什么? DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS 等各种异构数据源之间高效 阅读全文
posted @ 2018-08-06 15:30 ---江北 阅读(99379) 评论(1) 推荐(3) 编辑
摘要:一、概述 数据管理主要分为:元数据管理、计算管理、存储和成本管理、数据质量管理 二、元数据 元数据主要分为两大类:技术元数据和业务元数据 技术元数据: 存储数据仓库技术细节的数据,包括: 存储元数据:表名、字段名、分区信息等 运行元数据:作业类型、SQL、运行参数等 开发元数据:数据同步、计算任务、 阅读全文
posted @ 2018-08-03 13:39 ---江北 阅读(3758) 评论(0) 推荐(0) 编辑

TOP
点击右上角即可分享
微信分享提示