2019年3月15日
hadoop离线计算项目上线配置问题记录
摘要： 最近上线一个hadoop离线处理项目，因为在低配置（8G,4核）的时候装的CDH，后来集群配置（64G，16核）上来了，但许多参数不会自动修改，需要自己调整，处理过程中遇到的配置问题记录下。 1、hive 跑任务的时候发现reduce任务个数特别多，后来发现这个参数被改成64M了，改成1G就好了。 阅读全文
posted @ 2019-03-15 20:09 机器三脚猫 阅读(472) 评论(0) 推荐(1) 编辑