01 2020 档案

spark 运行概念和关键参数

摘要：概念宽依赖：是指子RDD的分区依赖于父RDD的多个分区或所有分区，也就是说存在一个父RDD的一个分区对应一个子RDD的多个分区。窄依赖：是指父RDD的每一个分区最多被一个子RDD的分区所用，表现为一个父RDD的分区对应于一个子RDD的分区或多个父RDD的分区对应于一个子RDD的分区，也就是说一个阅读全文

posted @ 2020-01-02 18:11 爱知菜阅读(6) 评论(0) 推荐(0) 编辑

azcopy linux 安装使用说明（blob）

摘要：azcopy 有过一次大的命令行接口更新： 7.x的版本命令形如： azcopy --source .... --destination ... 10.x的版本命令形如：azcopy copy 10.x的版本在“azcopy”后面有子命令，比如copy 现在一般都用10.x的版本了。安装说明：阅读全文

posted @ 2020-01-02 12:15 爱知菜阅读(152) 评论(0) 推荐(0) 编辑