随笔分类 -  大数据-Hadoop-MapReduce

map和reduce数量如何设置
摘要：一、控制Hive中Map和reduce的数量 Hive中的sql查询会生成执行计划，执行计划以MapReduce的方式执行，那么结合数据和集群的大小，map和reduce的数量就会影响到sql执行的效率。 除了要控制Hive生成的Job的数量，也要控制map和reduce的数量。 1、 map的数量 阅读全文
posted @ 2022-08-28 13:52 Geoffrey-Peng 阅读(890) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示