2017年3月9日

ps命令

摘要: ps -aux: [hdfs@sd-bigdata-cmdcenter-60-23 ~]$ ps -auxWarning: bad syntax, perhaps a bogus '-'? See /usr/share/doc/procps-3.2.8/FAQUSER PID %CPU %MEM V 阅读全文

posted @ 2017-03-09 15:04 Peter Jiang 阅读(151) 评论(0) 推荐(0) 编辑

2017年3月2日

ResourceManager High Availability ---ResourceManager高可用

摘要: ResourceManager High Availability ResourceManager高可用 Introduction 介绍 Architecture 架构 RM Failover RM故障转移 Manual transitions and failover 手动切换及故障转移 Auto 阅读全文

posted @ 2017-03-02 10:35 Peter Jiang 阅读(428) 评论(0) 推荐(0) 编辑

2017年3月1日

ResourceManger Restart

摘要: ResourceManger Restart Overview Feature Configurations Overview Feature Configurations Overview 综述 ResourceManager is the central authority that manag 阅读全文

posted @ 2017-03-01 19:38 Peter Jiang 阅读(410) 评论(0) 推荐(0) 编辑

2016年8月1日

java.io.IOException: java.io.EOFException: Unexpected end of input stream错误

摘要: 报错现象: Diagnostic Messages for this Task:Error: java.io.IOException: java.io.EOFException: Unexpected end of input stream at org.apache.hadoop.hive.io. 阅读全文

posted @ 2016-08-01 13:03 Peter Jiang 阅读(3928) 评论(0) 推荐(0) 编辑

2014年9月1日

-- process information unavailable 解决

摘要: 今天手动kill掉hive thrive进程,jps出现了“-- process information unavailable”,很怪异。。。问题解决:进入tmp目录, 删除该目录下名称为hsperfdata_{username}的文件夹然后jps,世界清静了。 阅读全文

posted @ 2014-09-01 12:02 Peter Jiang 阅读(954) 评论(0) 推荐(0) 编辑

2014年6月26日

Secondarynamenode无法正常备份:ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpoint

摘要: 原先使用hadoop默认设置(hadoop1.2.1),secondarynamenode会正常进行备份,定时从namenode拷贝image文件到SNN。但是具体SNN备份的时间周期和log文件的大小无法定制,后来楼主就修改了SNN的设置,将fs.checkpoint.period修改为... 阅读全文

posted @ 2014-06-26 15:38 Peter Jiang 阅读(3600) 评论(0) 推荐(1) 编辑

2014年5月29日

hadoop错误:Task attempt_201405291351_0001_m_000000_0 failed to report status for 744 seconds. Killing!

摘要: 在web控制端报错误:Task attempt_201405291351_0001_m_000000_0 failed to report status for 744 seconds. Killing!原因是由于执行合并索引操作时间较长,所以超过了600秒的时间限制,把这个值改高点就不会报错了。... 阅读全文

posted @ 2014-05-29 14:55 Peter Jiang 阅读(677) 评论(0) 推荐(0) 编辑

2014年5月26日

深度学习资料

摘要: http://blog.csdn.net/wangxinginnlp/article/details/17754173 http://blog.csdn.net/xudli/article/details/25451363 http://blog.csdn.net/u014803202/articl 阅读全文

posted @ 2014-05-26 16:49 Peter Jiang 阅读(102) 评论(0) 推荐(0) 编辑

2014年5月9日

学习storm的一些资料

摘要: 目前,准备学习storm,下面是收集的一些资料:1、storm入门---http://blog.linezing.com/?cat=922、get start with storm(中文翻译)----http://blog.csdn.net/lonelytrooper/article/details... 阅读全文

posted @ 2014-05-09 15:30 Peter Jiang 阅读(272) 评论(0) 推荐(0) 编辑

2014年5月8日

(转载)Linux man命令的使用方法

摘要: Linux man命令的使用方法(整理收集自网络)Linux提供了丰富的帮助手册,使用Linux man命令来查看一些不熟悉的命令的使用方法,还可以用来查询系统库文件中的一些函数定义和使用方法。Linux man中的man就是manual的缩写,用来查看系统中自带的各种参考手册,但是手册页分为好几个... 阅读全文

posted @ 2014-05-08 10:03 Peter Jiang 阅读(710) 评论(1) 推荐(0) 编辑

导航