摘要：
Secondary NameNode的成员变量很少，主要的有：privateCheckpointStorage checkpointImage;Secondary NameNode使用的StorageprivateNamenodeProtocol namenode;和NameNode通信的接口pri... 阅读全文
posted @ 2015-06-12 17:15
超人学院
阅读(229)
评论(0)
推荐(0)
摘要：
一、什么时候可以避免执行MapReduce？select *where语句中只有分区字段二、Jion优化驱动表最右边查询表表的大小从左边到右边依次增大标志机制显示的告知查询优化器哪张表示大表/*+streamtable(table_name)*/三、Map-side聚合sethive.map.agg... 阅读全文
posted @ 2015-06-12 17:14
超人学院
阅读(313)
评论(0)
推荐(0)
摘要：
函数在Scala语言里面也是一个对象，也许这对于Java程序员来说这比较令人惊讶。于是吧函数作为参数进行传递、把它们存贮在变量中、或者当作另一个函数的返回值都是可能的。吧函数当成值进行操作是函数型编程语言的基石。为了解释为什么吧函数当作值进行操作是十分有用的，我们来考虑一个计时器函数。这个函数的目的... 阅读全文
posted @ 2015-06-12 17:13
超人学院
阅读(318)
评论(0)
推荐(0)
摘要：
docker中的容器互联-linking系统docker有一个linking 系统可以连接多个容器。它会创建一对父子关系，父容器可以看到所选择的子容器的信息。1)容器的命名系统linking系统依据容器的名称来执行。当我们创建容器的时候，系统会随机分配一个名字。当然我们也可以自己来命名容器，这样做有... 阅读全文
posted @ 2015-06-12 17:12
超人学院
阅读(687)
评论(0)
推荐(0)
摘要：
Spout的实现步骤：· 对文件的改变进行分开的监听，并监视目录下有无新日志文件添加。· 在数据得到了字段的说明后，将其转换成tuple。· 声明Spout和Bolt之间的分组，并决定tuple发送给Bolt的途径。Spout的具体编码在Listing Three中显示。Listing Thr... 阅读全文
posted @ 2015-06-12 17:11
超人学院
阅读(275)
评论(0)
推荐(0)
摘要：
命令示例：1.事务被正常执行：#在Shell命令行下执行Redis的客户端工具。/>redis-cli#在当前连接上启动一个新的事务。redis 127.0.0.1:6379>multiOK#执行事务中的第一条命令，从该命令的返回结果可以看出，该命令并没有立即执行，而是存于事务的命令队列。redis... 阅读全文
posted @ 2015-06-12 17:10
超人学院
阅读(200)
评论(0)
推荐(0)
摘要：
测试oracle数据库的连接使用①连接oracle数据库，列出所有的数据库[hadoop@eb179 sqoop]$sqoop list-databases--connect jdbc 10.1.69.173:1521:ORCLBI --username huangq -P或者sqoop list-... 阅读全文
posted @ 2015-06-12 17:08
超人学院
阅读(4956)
评论(0)
推荐(0)
摘要：
HBaseConvetorUtil实体转换工具类public class HBaseConvetorUtil { /** *@Title:convetor *@Description:传入hbase返回结果值，返回实例集合 *@param *@return *@throws */ publics... 阅读全文
posted @ 2015-06-12 17:07
超人学院
阅读(429)
评论(0)
推荐(0)
摘要：
使用java操作solr前面讲了很多对solr的操作都是直接在页面上操作的，实际工作中肯定是要使用java进行操作的，在这我们就看一下如何使用java来操作solrSolr提供了solrj来使用java操作solr，SolrJ是封装了httpClient方法，来操作solr的API的。首先添加mav... 阅读全文
posted @ 2015-06-12 17:06
超人学院
阅读(5782)
评论(1)
推荐(0)
摘要：
Hadoop之Hbase从入门到精通http://yunpan.cn/cwhbfIv2pptiR（提取码：b786）超人学院Hadoop大数据技术资源分享更多精彩内容请关注超人学院微信更多精彩内容请关注：http://bbs.superwu.cn 阅读全文
posted @ 2015-06-12 17:05
超人学院
阅读(322)
评论(0)
推荐(0)
浙公网安备 33010602011771号