2017年3月29日

HDFS基本工具类的实现

摘要: package com.shikun.HdfsTool;import java.io.File;import java.io.IOException;import java.net.URI;import org.apache.hadoop.conf.Configuration;import org. 阅读全文

posted @ 2017-03-29 21:05 BDER 阅读(1330) 评论(0) 推荐(0) 编辑

2017年3月28日

HDFS基本shell操作

摘要: # HDFS 的shell练习 阅读全文

posted @ 2017-03-28 17:04 BDER 阅读(6635) 评论(0) 推荐(0) 编辑

2016年12月1日

eclipse下搭建shell脚本编辑器--安装开发shell的eclipse插件shelled

摘要: 1、安装“man-page viewer”插件(ShellEd需要,有的机器不需要,先装上) 安装地址:http://download.eclipse.org/technology/linuxtools/updates-nightly/ 2、安装“shelled”插件 在http://sourcef 阅读全文

posted @ 2016-12-01 17:22 BDER 阅读(15819) 评论(0) 推荐(1) 编辑

2016年11月25日

基于原生态Hadoop2.6 HA集群环境的搭建

摘要: hadoop2.6 HA平台搭建 一、条件准备 软件条件: Ubuntu14.04 64位操作系统, jdk1.7 64位,Hadoop 2.6.0, zookeeper 3.4.6 硬件条件: 1台主节点机器,配置:cpu 8个,内存32G,硬盘200G 5台从节点机器,配置均为:cpu 4个,内 阅读全文

posted @ 2016-11-25 21:48 BDER 阅读(2762) 评论(0) 推荐(0) 编辑

CDH与原生态hadoop之间的区别(转)

摘要: CDH(Cloudera)与hadoop(Apache)对比 阅读全文

posted @ 2016-11-25 19:32 BDER 阅读(20651) 评论(0) 推荐(2) 编辑

2016年11月15日

问题1-xshell远程连接不上linux主机

摘要: 在其他主机上搭建linux系统,我们一般通过xshell工具去远程访问该主机,这样不仅可以方便我们的对系统或者集群进行管理也方便了我们的操作,但是在搭建好环境的时候遇到如下问题: 解决方案:1.关闭目标主机防火墙 2.目标主机对于ssh服务没有安装 3.ssh服务虽然安装了,但是远程访问不允许 步骤 阅读全文

posted @ 2016-11-15 17:29 BDER 阅读(6464) 评论(0) 推荐(0) 编辑

2016年10月31日

原生态hadoop2.6平台搭建

摘要: hadoop2.6平台搭建 一、条件准备 软件条件: Ubuntu14.04 64位操作系统,jdk1.7 64位,Hadoop 2.6.0 硬件条件: 1台主节点机器,配置:cpu 8个,内存32G,硬盘200G 5台从节点机器,配置均为:cpu 4个,内存16G,硬盘200G 各个节点IP如下: 阅读全文

posted @ 2016-10-31 19:40 BDER 阅读(257) 评论(0) 推荐(0) 编辑

导航