随笔分类 -  hadoop

摘要:首先按照3.2.2-rc5 BUILDING.txt 说明安装指定包 git clone 源码 git checkout 到对应版本 然后执行: mvn package -Pdist,native -DskipTests -Dmaven.javadoc.skip issue 1: [INFO] [I 阅读全文
posted @ 2021-05-06 23:11 heaventouch 阅读(236) 评论(0) 推荐(0) 编辑
摘要:HBase 数据迁移/备份方法 1、Hadoop层 DistCp(迁移) Hadoop层的数据迁移主要用到DistCp(Distributed Copy), 官方描述是:DistCp(分布式拷贝)是用于大规模集群内部和集群之间拷贝的工具。它使用Map/Reduce实现文件分发,错误处理和恢复,以及报 阅读全文
posted @ 2020-09-09 15:55 heaventouch 阅读(902) 评论(0) 推荐(0) 编辑
摘要:hdfs web界面 1、总览页 Non DFS Used = Configured Capacity - Remaining Space - DFS UsedNon DFS Used = 配置的容量 - 剩余容量 - DFS使用容量 Configured Capacity = Total Disk 阅读全文
posted @ 2020-06-02 16:56 heaventouch 阅读(2628) 评论(0) 推荐(1) 编辑
摘要:在debian7虚拟机上安装hadoop2.6,期间遇到一些问题在此记录一下。 安装参考: Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04 Hadoop集群安装配置教程_Hadoop2.6.0_Ubuntu/CentOS 1、安装后出现 ... master 阅读全文
posted @ 2018-06-05 14:23 heaventouch 阅读(404) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示