Erbin - 博客园

MapReduce中map方法获取当前Record的路径

摘要：很多时候我们的hdfs路径设置的都是有规律的，而且从路径中可以获取一些信息。那么怎么在map的过程中获取到当前处理的记录的路径呢？// 假设当前路径为/data/app/app1/2015/09/13/00/custom.log.1import org.apache.hadoop.mapreduce... 阅读全文

posted @ 2015-09-14 16:26 Erbin 阅读(791) 评论(0) 推荐(0) 编辑

【转发】Java并发编程：Lock

摘要： Java并发编程：Lock 阅读全文

posted @ 2015-05-20 18:55 Erbin 阅读(74) 评论(0) 推荐(0) 编辑

Flume MemoryChannel ChannelFullException

摘要：先贴上异常信息 1 08 May 2015 17:55:23,751 WARN [New I/O worker #1] (org.apache.flume.source.AvroSource.append:350) - Avro source r1: Unable to process eve... 阅读全文

posted @ 2015-05-15 15:59 Erbin 阅读(1352) 评论(0) 推荐(0) 编辑

【转发】java的concurrent用法详解

摘要： GOTO:　java的concurrent用法详解阅读全文

posted @ 2015-04-28 10:01 Erbin 阅读(93) 评论(0) 推荐(0) 编辑

【转发】修改linux文件权限命令：chmod

摘要：修改linux文件权限命令：chmod 阅读全文

posted @ 2015-04-24 15:55 Erbin 阅读(69) 评论(0) 推荐(0) 编辑

ubuntu安装hadoop2.x（伪分布式）

摘要：接上篇：ubuntu安装hadoop1.x（伪分布式）1.x和2.x在安装上差异不大，就是程序目录不大一样。hadoop1.x和2.x部分对应关系1.x2.xcore-site.xml${HADOOP_HOME}/conf/core-site.xml${HADOOP_HOME}/etc/hadoop... 阅读全文

posted @ 2015-04-24 15:04 Erbin 阅读(178) 评论(0) 推荐(0) 编辑

ubuntu安装hadoop1.x（伪分布式）

摘要：参考 kinglau - 二、Ubuntu14.04下安装Hadoop2.4.0 （伪分布模式）接上篇 ubuntu安装hadoop(单机）1. 配置core-site.xml# hadoop1.x.x 的配置文件都在 $HADOOP_HOME/conf/下，hadoop2.x.x 的配置文件都在 ... 阅读全文

posted @ 2015-04-24 14:45 Erbin 阅读(365) 评论(0) 推荐(0) 编辑

【转发】Java匿名类中使用的局部变量为何要加final

摘要：转发自CSDN，作者未标明原作者。http://blog.csdn.net/rookieding/article/details/38707951原作者思路很清晰。Thx！这几天，在网上找了一些关于final的知识，当然并不全面，有的一时也没有很好的理解，先收集起来，理理思路，把不懂的画出来，以便更... 阅读全文

posted @ 2015-04-23 14:06 Erbin 阅读(364) 评论(0) 推荐(0) 编辑

ubuntu安装hadoop(单机）

摘要：参考 kinglau — 一、Ubuntu14.04下安装Hadoop2.4.0 （单机模式1.创建hadoop用户1.1创建hadoop用户组$ sudo addgroup hadoop1.2 创建hadoop用户$ sudo adduser -ingroup hadoop hadoop1.3 为... 阅读全文

posted @ 2015-04-21 15:34 Erbin 阅读(267) 评论(0) 推荐(0) 编辑

【转发】Spring--quartz中cronExpression配置说明

摘要：文章来源：Spring--quartz中cronExpression配置说明 http://dogstar.iteye.com/blog/116130Thx！Spring--quartz中cronExpression配置说明Spring--quartz中cronExpression字段 ... 阅读全文

posted @ 2015-04-17 17:01 Erbin 阅读(159) 评论(0) 推荐(0) 编辑