摘要: 76.指定在 MapReduce 作业中,哪些输出文件应该在任务失败时保留 mapreduce.task.files.preserve.filepattern 是 Hadoop MapReduce 框架中的一个配置属性,用于指定在 MapReduce 作业中,哪些输出文件应该在任务失败时保留。 在 阅读全文
posted @ 2024-01-09 20:05 OnePandas 阅读(49) 评论(0) 推荐(0) 编辑
摘要: 51.指定Shuffle传输过程中可以同时连接的节点数 mapreduce.shuffle.max.connections是Hadoop MapReduce中的一个配置参数,用于指定Shuffle传输过程中可以同时连接的节点数。该参数用于控制Shuffle传输的并发度,以保障任务的稳定性和性能。 可 阅读全文
posted @ 2024-01-09 20:05 OnePandas 阅读(62) 评论(0) 推荐(0) 编辑