摘要: 安装hadoop包 1、使用课程提供的hadoop-2.4.1.tar.gz,使用WinSCP上传到CentOS的/usr/local目录下。 2、将hadoop包进行解压缩:tar -zxvf hadoop-2.4.1.tar.gz 3、对hadoop目录进行重命名:mv hadoop-2.4.1 阅读全文
posted @ 2017-04-16 17:51 java一生 阅读(285) 评论(0) 推荐(0) 编辑
摘要: CentOS 6.5安装 1、使用课程提供的CentOS 6.5镜像即可,CentOS-6.5-i386-minimal.iso。 2、创建虚拟机:打开Virtual Box,点击“新建”按钮,点击“下一步”,输入虚拟机名称为spark1,选择操作系统为Linux,选择版本为Red Hat,分配10 阅读全文
posted @ 2017-04-16 17:44 java一生 阅读(573) 评论(0) 推荐(0) 编辑
摘要: Scala的Actor类似于Java中的多线程编程。但是不同的是,Scala的Actor提供的模型与多线程有所不同。Scala的Actor尽可能地避免锁和共享状态,从而避免多线程并发时出现资源争用的情况,进而提升多线程编程的性能。此外,Scala Actor的这种模型还可以避免死锁等一系列传统多线程 阅读全文
posted @ 2017-04-15 00:45 java一生 阅读(3762) 评论(0) 推荐(1) 编辑
摘要: Scala提供的隐式转换和隐式参数功能,是非常有特色的功能。是Java等编程语言所没有的功能。它可以允许你手动指定,将某种类型的对象转换成其他类型的对象。通过这些功能,可以实现非常强大,而且特殊的功能。 Scala的隐式转换,其实最核心的就是定义隐式转换函数,即implicit conversion 阅读全文
posted @ 2017-04-15 00:41 java一生 阅读(719) 评论(0) 推荐(0) 编辑
摘要: 类型参数是什么? 类型参数其实就类似于Java中的泛型。先说说Java中的泛型是什么,比如我们有List a = new ArrayList(),接着a.add(1),没问题,a.add("2"),然后我们a.get(1) == 2,对不对?肯定不对了,a.get(1)获取的其实是个String—— 阅读全文
posted @ 2017-04-15 00:39 java一生 阅读(746) 评论(0) 推荐(0) 编辑
摘要: 模式匹配 在模式匹配中使用if守卫 在模式匹配中进行变量赋值 对类型进行模式匹配 对Array和List进行模式匹配 case class与模式匹配 Option与模式匹配 阅读全文
posted @ 2017-04-15 00:34 java一生 阅读(3872) 评论(0) 推荐(0) 编辑
摘要: Scala的集合体系结构 List LinkedList Set 集合的函数式编程 函数式编程综合案例:统计多个文本内的单词总数 阅读全文
posted @ 2017-04-15 00:31 java一生 阅读(1533) 评论(0) 推荐(0) 编辑
摘要: 将函数赋值给变量 匿名函数 高阶函数 高阶函数的类型推断 Scala的常用高阶函数 闭包 SAM转换 Currying函数 return 阅读全文
posted @ 2017-04-15 00:29 java一生 阅读(1413) 评论(0) 推荐(0) 编辑
摘要: 将trait作为接口使用 在Trait中定义具体方法 在Trait中定义具体字段 在Trait中定义抽象字段 为实例混入trait trait调用链 在trait中覆盖抽象方法 混合使用trait的具体方法和抽象方法 trait的构造机制 trait field的初始化 trait继承class 阅读全文
posted @ 2017-04-15 00:24 java一生 阅读(3118) 评论(0) 推荐(0) 编辑
摘要: extends override和super override field isInstanceOf和asInstanceOf getClass和classOf 使用模式匹配进行类型判断 protected 调用父类的constructor 匿名内部类 抽象类 抽象field 阅读全文
posted @ 2017-04-15 00:19 java一生 阅读(802) 评论(0) 推荐(0) 编辑