2013年6月20日

简单的RPC java实现

摘要： RPC的名声大噪之时是在2003年，那一个“冲击波”病毒(Blaster Worm virus)袭卷全球的一年。而“冲击波”正是用着RPC这把刀来敲开了远程电脑的大门。当然RPC有更多正面的应用，比如NFS、Web Service等等。一、RPC的介绍 什么是RPC？Remote Procedure Call，远程过程调用。也就是说，调用过程代码并不是在调用者本地运行，而是要实现调用者与被调用者二地之间的连接与通信。比较严格的定义是：Remote procedure call(RPC) is aprotocolthat allows acomputer programrunning on o. 阅读全文

posted @ 2013-06-20 14:29 wangbokun 阅读(921) 评论(0) 推荐(0) 编辑

hadoop 磁盘限额配置

摘要： 配置方法： 在 hdfs-site.xml 里配置如下参数，注意，那个 value 的值是配置该磁盘保留的DFS不能使用的空间大小，单位是字节. (如果多块硬盘，则表示为每块硬盘保留这么多空间)<property><name>dfs.datanode.du.reserved</name><!-- cluster variant --><value>236223201280</value><description>Reserved space in bytes per volume. Always leave t 阅读全文

posted @ 2013-06-20 14:28 wangbokun 阅读(603) 评论(0) 推荐(0) 编辑

hadoop配置

摘要： 获取默认配置 配置hadoop，主要是配置core-site.xml,hdfs- site.xml,mapred-site.xml三个配置文件，默认下来，这些配置文件都是空的，所以很难知道这些配置文件有哪些配置可以生效，上网找 的配置可能因为各个hadoop版本不同，导致无法生效。浏览更多的配置，有两个方法:1.选择相应版本的hadoop,下载解压后，搜索*.xml,找到core-default.xml,hdfs-default.xml,mapred-default.xml,这些就是默认配置,可以参考这些配置的说明和key，配置hadoop集群。2.浏览apache官网,三个配置文件链接如下: 阅读全文

posted @ 2013-06-20 14:28 wangbokun 阅读(527) 评论(0) 推荐(0) 编辑

导航