hadoop 性能调优 重要参数

摘要: hadoop 性能调优 重要参数设置技巧分类:hadoop2012-12-16 19:532307人阅读评论(1)收藏举报这里主要针对Mapreduce的性能调优。这一两个月在做mapreduce的性能调优,有些心得,还是要记下来的,以郷后人~这里主要涉及的参数包括:HDFS:dfs.block.s... 阅读全文
posted @ 2015-04-22 13:35 xiao xiong2 阅读(307) 评论(0) 推荐(0) 编辑

hadoop 调优

摘要: Hadoop调优mapred.tasktracker.map.tasks.maximum官方解释:The maximum number of map tasks that will be runsimultaneously by a task tracker.我的理解:一个tasktracker最多... 阅读全文
posted @ 2015-04-21 16:18 xiao xiong2 阅读(163) 评论(0) 推荐(0) 编辑

hadoop 动态设置调整日志级别

摘要: Hadoop急诊室的半小时:动态设置调整日志级别技术大数据蜗牛2015.02.03本文通过一个在实际工作中所遇到的线上问题来告诉广大数据从业者一条通俗有用的人生哲理:线上遇到这样的问题,千万要冷静,越是着急越容易出乱子!心急吃不了热豆腐。十万火急上周二,朋友公司的Hadoop集群服务不可用,从早上9... 阅读全文
posted @ 2015-04-12 16:53 xiao xiong2 阅读(764) 评论(0) 推荐(1) 编辑

本博客的内容

摘要: 本博客主要用于记录java和数据库相关的技术内容。 阅读全文
posted @ 2014-10-01 13:52 xiao xiong2 阅读(131) 评论(0) 推荐(0) 编辑