摘要: Hadoop有一个叫做分布式缓存(distributed cache)的机制来将数据分发到集群上的所有节点上。为了节约网络带宽,在每一个作业中,各个文件通常只需要复制到一个节点一次。缓存文件复制位置:mapred-site.xml中<property><name>mapred.local.dir</name><value>/home/hadoop/tmp</value></property>操作步骤:1.将数据的分发到每个节点上:DistributedCache.addCacheFile(new URI("hdf 阅读全文
posted @ 2012-08-31 07:51 yanzhenxing 阅读(1075) 评论(0) 推荐(0) 编辑
摘要: 安装环境:CentOS 5.6eclipse3.3.2subversion-1.6.16.tar.bz2subversion-deps-1.6.16.tar.bz2subclipse 1.6.5subversion服务器安装步骤:1、解压subversion-1.6.16.tar.bz2tar -jxvf subversion-1.6.16.tar.bz2tar -jxvf subversion-deps-1.6.16.tar.bz22、编译安装cd subversion-1.6.16./configure --prefix=/opt/svnmake && make insta 阅读全文
posted @ 2012-08-31 07:47 yanzhenxing 阅读(207) 评论(0) 推荐(0) 编辑