摘要：
网上看到的，觉得很有用 ，摘下来，感谢 最近的项目需要使用Hbase做实时查询，由于Hbase只支持一级索引，也就是使用rowkey作为索引查询，所以对于多条件筛选查询的支持不够，在不建立二级索引的情况下，只能使用Hbase API中提供的各种filter过滤器进行筛选，感觉查询效率不太理想，于是考 阅读全文
摘要：
关闭idea 打开项目所在位置并cd .idea 修改scala_compiler.xml文件 删除掉参数行包含-make:transitive 保存后退出编辑并重启idea打开项目 阅读全文
摘要：
=>这符号其实是映射转化的意思，个人理解，可能不准确， var increase = (x: Int) => x + 1 increase(10) res0: Int = 11 意思就是你输入 整数时候 ，会转换到右边 x 然后赋值给increase 阅读全文
摘要：
scala 中序列那里 各种操作符： :: 该方法被称为cons，意为构造，向队列的头部追加数据，创造新的列表。用法为 x::list,其中x为加入到头部的元素，无论x是列表与否，它都只将成为新生成列表的第一个元素，也就是说新生成的列表长度为list的长度＋1(btw, x::list等价于list 阅读全文
摘要：
其实都是相似的！网上的我不知道，我只保证我写的都是我自己亲自运行过的，可以正常使用的！ 1.http://spark.apache.org/downloads.html 下载地址 2.环境 jdk 免密登录这些就不说了，这些还不会，下面也不要看了！浪费你个人时间~ 我下载的：spark-1.6.1- 阅读全文
摘要：
每次使用的时候都要手动去启动真头痛！ 解决办法，自启吧！ 方法一： 方法一： /etc/rc.local中添加 文件地址记得替换掉 ，我没使用这种，发现不是每次都行，就换了第二种方法 /usr/local/kafka_2.11-0.9.0.1/bin/kafka-server-start.sh /u 阅读全文
摘要：
其实异常说的很清楚 队列满了！ ArrayBlockingQueue FIFO 的队列： ArrayBlockingQueue内部是通过一个Object数组和一个ReentrantLock实现的。同时ReentrantLock在使用时也提供了公平和非公平两种。 因为数组是有界的，所以在数组为空和数组 阅读全文
摘要：
摘自网上 当时写的很好，很详细的介绍了各个组件直接的关系 Storm集群和Hadoop集群表面上看很类似。但是Hadoop上运行的是MapReduce jobs，而在Storm上运行的是拓扑（topology），这两者之间是非常不一样的。一个关键的区别是： 一个MapReduce job最终会结束， 阅读全文
摘要：
当然 这方法也是我再网上学习的，亲自测试可以使用，才会记录下来 两种方式可以实现开机自启动 第一种：直接修改/etc/rc.d/rc.local文件 在/etc/rc.d/rc.local文件中需要输入两行，其中export JAVA_HOME=/usr/java/jdk1.8.0_112是必须要有 阅读全文
摘要：
环境：linux centos6.5 1.安装erlang 下载rpm仓库：wget http://packages.erlang-solutions.com/erlang-solutions-1.0-1.noarch.rpm 安装rpm仓库rpm -Uvh erlang-solutions-1.0 阅读全文