随笔分类 -  大数据

MaxCompute参数调优
摘要：1 背景及目的 对于ODPS上的运行时间长的任务来说，针对不同的问题有不同的优化方法（详见其他章节）。但是对于一些特殊场景的任务来说，除了从业务上可以进行优化之外，还需要通过一些辅助的参数设置才能达到比较好的优化效果。因此，ODPS提供了很多性能参数供开发人员使用。 2 参数介绍 2.1 资源参数 阅读全文
posted @ 2023-03-29 17:24 Thn_nhT 阅读(1439) 评论(0) 推荐(0) 编辑
MaxCompute基础与MaxCompute_SQL优化
摘要：MaxCompute基础与MaxCompute_SQL优化 总论： 大数据计算服务 ( MaxCompute，原名 ODPS ) 是一种快速、完全托管的 TB/PB 级数据仓库解决方案 。MaxCompute 向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计 阅读全文
posted @ 2023-03-16 17:12 Thn_nhT 阅读(1196) 评论(0) 推荐(1) 编辑
maxcomputeSQL工作流程
摘要：MaxCompute 向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，有效降低企业成本，并保障数据安全提交一个SQL语句，发送 RESTful 请求给HTTP服务器HTTP 服务器做用户认证。认证通过后，请求就会以 Kuafu通信协议方式发送给 Wo 阅读全文
posted @ 2022-10-12 09:30 Thn_nhT 阅读(47) 评论(0) 推荐(0) 编辑
Maxcompute常见错误(自用)
摘要：No1.FAILED: ODPS-0130131 报错信息：FAILED: ODPS-0130131:[1,15] Table not found - table test0517.dual cannot be resolved 用户场景：用虚拟表计算，select sum(1+1) from du 阅读全文
posted @ 2022-08-16 11:29 Thn_nhT 阅读(2073) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示