随笔分类 - yarn
摘要:1、环境说明 Hadoop版本: 3.1.4 hbase 版本: 1.2.6 timeserver 版本 2.0 2、vts1.0/vts1.5与vts2.0 vts1.x缺点: 1、不支持分布式收集。 2、收集器和读取器是单实例。 3、存储使用的是leveldb。 vts2 1、借助与nodema
阅读全文
摘要:MapReduce优化优化(1)资源相关参数:以下参数是在自己的 MapReduce 应用程序中配置就可以生效 mapreduce.map.memory.mb: 一个 Map Task 可使用的内存上限(单位:MB),默认为 1024。如果 Map Task 实际使用的资源量超过该值,则会被强制杀死
阅读全文