数据中台文档--参考

1.调度参数

https://help.aliyun.com/document_detail/137548.html?spm=5176.11065259.1996646101.searchclickresult.186fec82sqwpGT

2.在DataWorks上使用PyODPS

https://help.aliyun.com/document_detail/90444.html?spm=5176.10695662.1996646101.searchclickresult.3ec3414bYbZFgz

https://pyodps.readthedocs.io/zh_CN/latest/installation-ext.html

3.left join

https://help.aliyun.com/document_detail/89993.html?spm=5176.11065259.1996646101.searchclickresult.2ce47ec2Qset2L#section-omw-m9j-d6i

4.Shard表示对一个Topic进行数据传输的并发通道,每个Shard会有对应的ID。每个Shard会有多种状态: Opening - 启动中,Active - 启动完成可服务。每个Shard启用以后会占用一定的服务端资源,建议按需申请Shard数量。shard可以进行合并和分裂,当数据量增大时,可以采用分裂shard来增加数据通道,提高数据写入的并发量,当数据量减小时,应该合并shard减少服务器资源浪费。例如淘宝在双11期间,数据量骤增,这个时候每个shard的写入压力过大,便可以增加shard提高写入效率,在双11过后,数据量明显降低,则需要合并shard。

https://help.aliyun.com/document_detail/135491.html?spm=5176.11065259.1996646101.searchclickresult.4d1860460W1jMO

5.DECIMAL(precision,scale)

10进制精确数字类型。

  • precision:表示最多可以表示多少位的数字。取值范围:1 <= precision <= 38
  • scale:表示小数部分的位数。取值范围: 0 <= scale <= 18

如果不指定以上两个参数,则默认为decimal(38,18)

https://help.aliyun.com/document_detail/159541.html?spm=a2c4g.11186623.6.638.4e7139a45uB7P0

6.日期函数 https://help.aliyun.com/document_detail/48974.html?spm=a2c4g.11186623.6.714.63b46f41pfLlu7

https://help.aliyun.com/document_detail/48974.html?spm=a2c4g.11186623.6.714.63b46f41pfLlu7

posted @ 2020-05-07 21:04  酸奶加绿茶  阅读(362)  评论(0编辑  收藏  举报