11 2019 档案
摘要:MapReduce常用接口 MapReduce中常见的类如下。 org.apache.hadoop.mapreduce.Job:用户提交MR作业的接口,用于设置作业参数、提交作业、控制作业执行以及查询作业状态。 org.apache.hadoop.mapred.JobConf:MapReduce作业
阅读全文
摘要:Scala 访问修饰符基本和Java的一样,分别有:private,protected,public。如果没有指定访问修饰符,默认情况下,Scala 对象的访问 级别都是 public。Scala 中的 private 限定符,比 Java 更严格,在嵌套类情况下,外层类甚至不能访问被嵌套类的私有成
阅读全文
摘要:Scala 可以使用两种形式的标志符,字符数字和符号。 字符数字使用字母或是下划线开头,后面可以接字母或是数字,符号"$"在 Scala 中也看作为字母。然而以"$"开头的标识符为保留的 Scala 编译器产生的标志符使用,应用程序应该避免使用"$"开始的标识符,以免造成冲突。 + ++ ::: <
阅读全文
摘要:解压安装:# tar -zxvf 解压目录/安装包 -C 解压至目录 配置环境变量 # vi /etc/profile 添加export SQOOP_HOME=/opt/sqoop1.4.6export PATH=$PATH:$SQOOP_HOME/bin 修改sqoop-env.sh # cd /
阅读全文
摘要:一、安装jdk、hadoop 注意在主节点上解压安装 # tar -zxvf jdk-8u201-linux-x64.tar.gz -C /usr/lcoal/src # tar -zxvf hadoop-2.6.0.tar.gz -C /usr/local 2. 配置环境变量 编辑/etc/pro
阅读全文