摘要:
storm绝对是我见过最难启动的集群,没有之一!从安装 zeromq jzmq错误,到zookeeper集群启动错误,磕磕绊绊,耗费我2天(下班后开始计算),今天终于搞定了,纪念下! 下面是启动storm nimbus时的错误,不知道为什么出这个错误,查看lib文件下,有jar包,百度啊 谷歌啊都搜 阅读全文
摘要:
用虚拟机搭建zookeeper集群一直拒绝连接,异常如下: 2016-02-22 00:49:45,687 [myid:1] - WARN [QuorumPeer[myid=1]/0:0:0:0:0:0:0:0:2181:QuorumCnxManager@382] - Cannot open cha 阅读全文
摘要:
fatal error: all goroutines are asleep - deadlock! 这个错误的原因是: 在main goroutine线,期望从管道中获得一个数据,而这个数据必须是其他goroutine线放入管道的 但是其他goroutine线都已经执行完了(al... 阅读全文
摘要:
slurper 可以将任何格式的数据导入HDFS, 这里有github地址 这里鄙视下百度,居然搜索不到! 第一步,下载安装 git clone git@github.com:alexholmes/hdfs-file-slurper.git cd hdfs-file-slurper mvn pack 阅读全文
摘要:
R语言最让我兴奋的点还是各种图形的绘制!比如散点图、直方图等等。今天学习一下!#R 有三种绘图系统#base 容易上手,但是很难扩展#grid 修正了一些base的缺点#lattice 建立在grid之上 为常见的图表提供了函数#数据集data(obama_vs_mccain,pa... 阅读全文
摘要:
大年初一,看了看春晚的开头,闲极无聊,正好手边有从同事那借来的《学习R》这本书,那就学学吧,说不定以后会用到,顺便逃避爸妈催婚,单身狗的春节就是受虐!(PS:公司老大常常说我,学那么多东西,用不到,有啥用?我没有反驳过,其实我一直想说,如果我不学,恐怕永远不会有机会用到!) 从哪... 阅读全文
摘要:
了解过flume的人,差不多都看过这张或则类似的图片,本文即实现上图部分内容。(由于条件有限,目前是单机上实现) flume-agent配置文件 #flume agent conf source_agent.sources = server source_agent.sinks = avroSink 阅读全文
摘要:
scala中有一个灰常强大的东西,叫做模式匹配。可以理解为Switch,只是比它更加强大。 var sign = -1 val ch:Char = '+' /** * 模式匹配:更好用的switch */ ch match { case '-' => sign... 阅读全文
摘要:
scala是一种多范式编程语言,其特色之一就是函数式编程,本节就来学习它!在变量中存放函数 val num = 3.14 val fun = ceil _ // _将ceil方法转换成了函数 println(fun(num)) val array = Ar... 阅读全文
摘要:
特质,很像java中的接口,但是又有些不同,比如实现方法,当然java8也可以在接口中实现一个方法了,但是只能定义一个default方法。 当做接口使用//特质trait Logger { def log(msg:String)}trait ConsoleLogger ext... 阅读全文