随笔分类 - hadoop
摘要:首先按照3.2.2-rc5 BUILDING.txt 说明安装指定包 git clone 源码 git checkout 到对应版本 然后执行: mvn package -Pdist,native -DskipTests -Dmaven.javadoc.skip issue 1: [INFO] [I
阅读全文
摘要:HBase 数据迁移/备份方法 1、Hadoop层 DistCp(迁移) Hadoop层的数据迁移主要用到DistCp(Distributed Copy), 官方描述是:DistCp(分布式拷贝)是用于大规模集群内部和集群之间拷贝的工具。它使用Map/Reduce实现文件分发,错误处理和恢复,以及报
阅读全文
摘要:hdfs web界面 1、总览页 Non DFS Used = Configured Capacity - Remaining Space - DFS UsedNon DFS Used = 配置的容量 - 剩余容量 - DFS使用容量 Configured Capacity = Total Disk
阅读全文
摘要:在debian7虚拟机上安装hadoop2.6,期间遇到一些问题在此记录一下。 安装参考: Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04 Hadoop集群安装配置教程_Hadoop2.6.0_Ubuntu/CentOS 1、安装后出现 ... master
阅读全文