摘要： Scala 与 Java有着相同的数据类型，下表列出了 Scala 支持的数据类型： Byte8位有符号补码整数。数值区间为 -128 到 127 Short16位有符号补码整数。数值区间为 -32768 到 32767 Int32位有符号补码整数。数值区间为 -2147483648 到 21474 阅读全文

摘要： 如果你之前是一名 Java 程序员，并了解 Java 语言的基础知识，那么你能很快学会 Scala 的基础语法。 Scala 与 Java 的最大区别是：Scala 语句末尾的分号 ; 是可选的。 我们可以认为 Scala 程序是对象的集合，通过调用彼此的方法来实现消息传递。接下来我们来理解下，类， 阅读全文

摘要： 没用过IDEA工具，听说跟Eclipse差不多，sbt在Idea其实就等于maven在Eclipse。Spark运行在JVM中，所以要在Idea下运行spark，就先要安装JDK 1.8+ 然后加入Scala和Spark的依赖包就可以进行开发了，不要安装低版本的JDK。 先下载Idea的社区版 ht 阅读全文

摘要： MapReduce应用场景 前一阵子参加炼数成金的MapReduce培训，培训中的作业例子比较有代表性，用于解释问题再好不过了。有一本国外的有关MR的教材，比较实用，点此下载。 MR能解决什么问题？一般来说，用的最多的应该是日志分析，海量数据排序处理。最近一段时间公司用MR来解决大量日志的离线并行分 阅读全文

摘要： 在Linux下安装Postgresql有二进制格式安装和源码安装两种安装方式，这里用的是二进制格式安装。各个版本的Linux都内置了Postgresql，所以可直接通过命令行安装便可。本文用的是Centos6.5。 安装Postgresql 安装成功后，数据库状态 尝试启动数据库，但报错，需要先初始 阅读全文

摘要： 当Ping 主机名时可以映射出该主机的IP地址，反之亦然。配置并指定DNS服务器可以快速部署集群，不需要每台主机都去修改HOSTS文件即可实现IP与主机名的相互解析。而在Linux下的DNS是用bind来实现的。 环境： 机器IP 机器名称 用途 10.190.60.5 hadoop01.ftgov 阅读全文

摘要： 关于VMware的三种网络连接方式，NAT，Bridged，Host-Only ，在刚接触的时候通常会遇到主机Ping不通虚拟机而虚拟机能Ping得通主机；主机与虚拟机互不相通等等网络问题。本文就这三种连接方式作一一说明，也方便以后翻阅当参考用。 首先，要注意安装完VMware后，控制面板\网络和 阅读全文

摘要： 能长期坚持去做，并做好一件事，真的不是那么容易。 从CSDN到网易，再从网易到51CTO，最后是博客园。几乎这些技术博客圈子里都有过我的影子。但基本都是半途而废，到后来，随着年龄增长以及工作圈子的限制，发现自己的叙事思维越来越模糊，已经可以用“乱”来形容脑海里的状态了。 有个同事，坚持写博客已经8年 阅读全文

摘要： 1 oracle常用经典SQL查询 2 常用SQL查询： 3 4 1、查看表空间的名称及大小 5 6 select t.tablespace_name, round(sum(bytes/(1024*1024)),0) ts_size 7 from dba_tablespaces t, dba_data_files d 8 where t... 阅读全文

摘要： 1，排序 - - 合并连接（Sort Merge Join， SMJ） 2，嵌套循环（Nested Loops， NL） 3，哈希连接（Hash Join， HJ） Join是一种试图将两个表结合在一起的谓词，一次只能连接2个表，表连接也可以被称为表关联。在后面的叙 述中，我们将会使用“row so 阅读全文