摘要:
1、分区是必须要经历Shuffle过程的,没有Shuffle过程无法完成分区操作2、分区是通过MapTask输出的key来完成的,默认的分区算法是数组求模法: 数组求模法: 将Map的输出Key调用hashcode()函数得到的哈希吗(hashcode),此哈希吗是一个数值类型 ,将此哈希吗数值直接 阅读全文
摘要:
1、分区是必须要经历Shuffle过程的,没有Shuffle过程无法完成分区操作2、分区是通过MapTask输出的key来完成的,默认的分区算法是数组求模法: 数组求模法: 将Map的输出Key调用hashcode()函数得到的哈希吗(hashcode),此哈希吗是一个数值类型 ,将此哈希吗数值直接 阅读全文
|