摘要: 原文地址:http://langyu.iteye.com/blog/992916 另一篇博文:http://www.cnblogs.com/gwgyk/p/3997849.html Shuffle过程是MapReduce的核心,也被称为奇迹发生的地方。要想理解MapReduce, Shuffle是必 阅读全文
posted @ 2017-02-24 15:30 peak-c 阅读(234) 评论(0) 推荐(0) 编辑
摘要: hadoop 错误:Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-address is not configured. hadoop 错误:java.lang 阅读全文
posted @ 2017-02-24 15:09 peak-c 阅读(428) 评论(0) 推荐(0) 编辑
摘要: 1.没有ack : kafkaspout id 重复导致每次读最新没有数据。 2.由于storm提供的读取kafka的enternal工具存在bug,导致重复读取数据,致使数据不准确。storm bug标号:[storm-643] (0.9.5,之后已修复) 3.storm-netty 连接失败导致 阅读全文
posted @ 2017-02-24 15:09 peak-c 阅读(196) 评论(0) 推荐(0) 编辑
摘要: Storm 性能优化 原文地址:http://www.jianshu.com/p/f645eb7944b0 目录 场景假设 调优步骤和方法 Storm 的部分特性 Storm 并行度 Storm 消息机制 Storm UI 解析 性能优化 场景假设 在介绍 Storm 的性能调优方法之前,假设一个场 阅读全文
posted @ 2017-02-24 11:53 peak-c 阅读(6198) 评论(1) 推荐(6) 编辑
摘要: git使用资料: https://github.com/peak-c/my-git 公司内部使用开发规范: 一. 代码库介绍 个人开发库(git@gitlab.adrd.sohuno.com:spero/xxx_spero.git)master:个人主线,始终与发布库的master保持同步。feat 阅读全文
posted @ 2017-02-24 11:38 peak-c 阅读(346) 评论(0) 推荐(0) 编辑
摘要: Java并发编程:深入剖析ThreadLocal(转载) 原文链接:Java并发编程:深入剖析ThreadLocal 想必很多朋友对ThreadLocal并不陌生,今天我们就来一起探讨下ThreadLocal的使用方法和实现原理。首先,本文先谈一下对ThreadLocal的理解,然后根据Thread 阅读全文
posted @ 2017-01-16 16:25 peak-c 阅读(162) 评论(0) 推荐(0) 编辑
摘要: 描述: 现象一 :A 为 接口,AImpl 为 A 的实现类,且 AImpl 受 aop 扫描,且 aop 无特殊配置 此时若:Spring 中 注入 AImpl 类型的bean,获取一样 报错 Spring 中 注入 A 类型的bean ,获取一样 成功 现象二 :B 没有实现接口,B受 aop 阅读全文
posted @ 2016-11-03 16:01 peak-c 阅读(3268) 评论(1) 推荐(2) 编辑
摘要: Linux命令【注意:建议用UltraEdit打开】 一.文件处理命令 1.命令格式与目录处理命令 ls –a【查看隐藏文件】 ls –l【查看文件信息长格式显示】 ls –d【查看指定目录的详细信息】 ls –h【显示容量大小】 ls –i【查看任何文件的I 节点】 ll 文件名【查看一个文件的详细信息】 2.目录处理命令 ... 阅读全文
posted @ 2016-11-02 15:59 peak-c 阅读(1031) 评论(0) 推荐(0) 编辑
摘要: git学习教程:http://www.liaoxuefeng.com/wiki/0013739516305929606dd18361248578c67b8067c8c017b000/ 安装后配置全局参数 git config --global user.name "name"git config - 阅读全文
posted @ 2016-07-22 17:01 peak-c 阅读(1719) 评论(0) 推荐(0) 编辑
摘要: 注(version:5.15.1) 1.部署流程(定义流程) 1 InputStream in = new FileInputStream(file); 2 ZipInputStream zipInputStream = new ZipInputStream(in); 3 processEngine 阅读全文
posted @ 2016-07-21 18:05 peak-c 阅读(14957) 评论(0) 推荐(0) 编辑