Fork me on GitHub
摘要: fuser可用于查询文件、目录、socket端口和文件系统的使用进程1.查询文件和目录使用者fuser最基本的用法是查询某个文件或目录被哪个进程使用:# fuser -v ./ USER PID ACCESS C... 阅读全文
posted @ 2015-04-21 18:07 程序优化 阅读(375) 评论(0) 推荐(0) 编辑
摘要: 由于hadoop-2.6.0.tar.gz安装包是在32位机器上编译的,64位的机器加载本地库.so文件时会出错,比如:java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeC... 阅读全文
posted @ 2015-03-26 15:15 程序优化 阅读(148) 评论(0) 推荐(0) 编辑
摘要: 异步通信对于BS(Browser-Server 浏览器)架构,很多情景下server的处理时间较长。如果浏览器发送请求后,保持跟server的连接,等待server响应,那么一方面会对用户的体验有负面影响;另一方面,很有可能会由于超时,提示用户服务请求失败。对于这种情... 阅读全文
posted @ 2015-03-09 16:54 程序优化 阅读(445) 评论(0) 推荐(0) 编辑
摘要: HBase在保证高性能的同时,为用户提供了便于理解的一致性数据模型MVCC (Multiversion Concurrency Control),即多版本并发控制技术,把数据库的行锁与行的多个版本结合起来,从而去提高数据库系统的并发性能。要理解mvcc,首先需知道为什... 阅读全文
posted @ 2015-02-15 18:34 程序优化 阅读(770) 评论(0) 推荐(1) 编辑
摘要: 前段时间公司hadoop集群宕机,发现是namenode磁盘满了, 清理出部分空间后,重启集群时,重启失败。又发现集群Secondary namenode 服务也恰恰坏掉,导致所有的操作log持续写入edits.new 文件,等集群宕机的时候文件大小已经达... 阅读全文
posted @ 2015-01-31 23:22 程序优化 阅读(666) 评论(0) 推荐(0) 编辑
摘要: 在运行一个group by的sql时,抛出以下错误信息:Task with the most failures(4): -----Task ID: task_201411191723_723592_m_000004URL: http://DDS0204.drati... 阅读全文
posted @ 2015-01-28 16:14 程序优化 阅读(366) 评论(0) 推荐(0) 编辑
摘要: Bigtable:一个分布式的结构化数据存储系统本文的英文原文为Google在2006年发布的Google Bigtable paper本文的翻译版本由Alex完成,原文地址为: http://blademaster.ixiezi.com/这是我很长时间以来一直想要翻... 阅读全文
posted @ 2015-01-27 18:41 程序优化 阅读(534) 评论(0) 推荐(0) 编辑
摘要: 英文原文地址: Google File system译文原文地址: The Google File System中文版Google File System中文版摘要我们设计并实现了Google GFS文件系统,一个面向大规模数据密集型应用的、可伸缩的分布式文件系统。G... 阅读全文
posted @ 2015-01-27 16:18 程序优化 阅读(274) 评论(0) 推荐(0) 编辑
摘要: 英文原文链接: Google Map Reduce译文原文链接: Google MapReduce中文版Google MapReduce中文版译者: alex摘要MapReduce是一个编程模型,也是一个处理和生成超大数据集的算法模型的相关实现。用户首先创建一个Map... 阅读全文
posted @ 2015-01-27 16:15 程序优化 阅读(465) 评论(0) 推荐(0) 编辑
摘要: 目前实现的监控概览 阅读全文
posted @ 2014-12-31 00:54 程序优化 阅读(188) 评论(0) 推荐(0) 编辑