摘要： continue 阅读全文

摘要： 1、Google File System概述google file system是一个分布式文件系统，针对的是数据密集型应用，提供容错功能，运行在低廉的服务器上，同时给大量的用户提供高性能服务。尽管google file system有着传统的分布式文件系统的目标，但是GFS的开发兼顾观察现在Int... 阅读全文

摘要： 比如下面的例子：一行X值在节点M和节点N上有副本客户端A在节点M上写入行X的值一段时间后，客户端B在节点N上读取行X的值一致性模型所要做的就是决定客户端B能否看到客户端A写的值。一致性模型分为一下几种模型： 随意一致性（causal consistency）delta一致性（delta consis... 阅读全文

摘要： 转载地址：http://blog.csdn.net/strongerbit/article/details/7013221HDFS Federation(HDFS 联盟)介绍1. 当前HDFS架构和功能概述我们先回顾一下HDFS功能。HDFS实际上具有两个功能：命名空间管理（Namespace ma... 阅读全文

摘要： 采用的是4台真实机器：namenode：qzhong node27datanode：qzhong node27 node100 node101操作系统环境：qzhong（Ubuntu-14.0） node27、node100、node101（CentOS 64bits）HA配置方式：采用的是jour... 阅读全文

摘要： 在hadoop-1.2.1中运行所遇到的问题：2014-11-14 22:43:42 在服务器上运行hadoop-1.2.1中的datanode，出现了内存占用过大，导致ssh登陆出现如下问题：1、# There is insufficient memory for the Java Runtime... 阅读全文

摘要： 关键配置(core-site.xml 和hdfs-site.xml)（这里只是针对与HDFS，没有启动MapReduce）：core-site.xml fs.default.name hdfs://qzhong:8000 hdfs-site.xml dfs.name.dir /home/... 阅读全文

摘要： java从jdk1.4后就引入了java NIO机制： NIO的显著特点就是通道（channel）、缓冲（buffer）、选择器（selector），NIO机制中添加了传统I/O机制中没有的非阻塞调用（这对于网络通信很有用，可以有效利用CPU），但是这个只能对于网络通道（Socketchannel）... 阅读全文

摘要： write函数作为用户向终端或者文件进行写数据的重要函数，有着重要的作用。|------| |---------| |---------| |----------|　| write |----->|sys_write|-------->|vfs_write|------->|ext4... 阅读全文

摘要： 原子操作提供了指令原子执行，中间没有中断。就像原子被认为是不可分割颗粒一样，原子操作（atomic operation）是不可分割的操作。如下面简单的例子：Thread 1 Thread 2---------------------------------------------get i ... 阅读全文