摘要：
vi getNcdcBigData.sh内容如下：#!/bin/bashfor i in {1901..2014}docd /home/xxxx/hapood/ncdcwget --execute robots=off -r -np -nH --cut-dirs=4 -R index.html* ftp://ftp.ncdc.noaa.gov/pub/data/gsod/$i/done来自为知笔记... 阅读全文
摘要：
阅读目录概要章节1：安装java 1.6章节2：设置ssh无密码登录章节3：Hadoop的安装(在Hadoop用户下)章节4：配置Hadoop相关配置文件章节5：Hadoop启动章节6：Hadoop环境测试章节7：参考链接概要Hadoop有以下3种运行模式：独立（或本地）模式 ： 无需运行任何守护进程，所有程序都在同一个JVM上运行。在此模式下测试和调试MapReduce程序很方便，因此该模... 阅读全文
摘要：
安装java 1.6Centos6.8安装完成后，一般都安装了java，为了安装java1.6，需要卸载系统自带的java，主要步骤： 先安装java1.6，目的：为了防止先卸载系统自带java时，相关的依赖软件也被卸载； 卸载系统自带的java；具体步骤： 1. 查看系统自带java（为后面的卸载使用） rpm -qa | grep jdk // 显示的后面都需要卸载 ... 阅读全文