01 2018 档案
nested exception is java.lang.IllegalStateException: Context namespace element 'annotation-config' a
摘要：公司还用的是spring低版本，今天用jre 8测试了一下，发现错误： Unexpected exception parsing XML document from class path resource [applicationContext-dao.xml]; nested exception
阅读全文
摘要：解决方法：https://stackoverflow.com/questions/37442910/spark-shell-startup-errors 异常： 18/01/29 19:04:27 WARN HiveMetaStore: Retrying creating default datab
阅读全文
摘要：这是Zk 的可视化工具 看到的Storm 目录结构 ，这时候没有提交任何的任务给这个集群， 其实这时候我只是启动了 nimbus 还没有启动Supervisors ，所有你 看懂的Supervisors那个文件夹是灰的， 当我启动了2个Supervisor 之后 ，zk 的Supervisors 文
阅读全文
摘要：画的丑，勉强看看吧 Nimbus我感觉他就像人的大脑一样！ 当客户端给这个人发送了段信息 ，这个人的大脑就接收到这段信息，这个人不简单，是幕后大佬，一般不自己去干活，都是交给下面二当家去执行，当时这个大佬比较公平，在让下面小弟去干活时候，先去zk 那边看看，每个当家的那里还有多少个可以干活的小弟，不
阅读全文
摘要：网上看到的，觉得很有用 ，摘下来，感谢 最近的项目需要使用Hbase做实时查询，由于Hbase只支持一级索引，也就是使用rowkey作为索引查询，所以对于多条件筛选查询的支持不够，在不建立二级索引的情况下，只能使用Hbase API中提供的各种filter过滤器进行筛选，感觉查询效率不太理想，于是考
阅读全文
摘要：关闭idea 打开项目所在位置并cd .idea 修改scala_compiler.xml文件 删除掉参数行包含-make:transitive 保存后退出编辑并重启idea打开项目
阅读全文
摘要：=>这符号其实是映射转化的意思，个人理解，可能不准确， var increase = (x: Int) => x + 1 increase(10) res0: Int = 11 意思就是你输入 整数时候 ，会转换到右边 x 然后赋值给increase
阅读全文
摘要：scala 中序列那里 各种操作符： :: 该方法被称为cons，意为构造，向队列的头部追加数据，创造新的列表。用法为 x::list,其中x为加入到头部的元素，无论x是列表与否，它都只将成为新生成列表的第一个元素，也就是说新生成的列表长度为list的长度＋1(btw, x::list等价于list
阅读全文
摘要：其实都是相似的！网上的我不知道，我只保证我写的都是我自己亲自运行过的，可以正常使用的！ 1.http://spark.apache.org/downloads.html 下载地址 2.环境 jdk 免密登录这些就不说了，这些还不会，下面也不要看了！浪费你个人时间~ 我下载的：spark-1.6.1-
阅读全文
摘要：每次使用的时候都要手动去启动真头痛！ 解决办法，自启吧！ 方法一： 方法一： /etc/rc.local中添加 文件地址记得替换掉 ，我没使用这种，发现不是每次都行，就换了第二种方法 /usr/local/kafka_2.11-0.9.0.1/bin/kafka-server-start.sh /u
阅读全文
摘要：其实异常说的很清楚 队列满了！ ArrayBlockingQueue FIFO 的队列： ArrayBlockingQueue内部是通过一个Object数组和一个ReentrantLock实现的。同时ReentrantLock在使用时也提供了公平和非公平两种。 因为数组是有界的，所以在数组为空和数组
阅读全文
摘要：摘自网上 当时写的很好，很详细的介绍了各个组件直接的关系 Storm集群和Hadoop集群表面上看很类似。但是Hadoop上运行的是MapReduce jobs，而在Storm上运行的是拓扑（topology），这两者之间是非常不一样的。一个关键的区别是： 一个MapReduce job最终会结束，
阅读全文
摘要：当然 这方法也是我再网上学习的，亲自测试可以使用，才会记录下来 两种方式可以实现开机自启动 第一种：直接修改/etc/rc.d/rc.local文件 在/etc/rc.d/rc.local文件中需要输入两行，其中export JAVA_HOME=/usr/java/jdk1.8.0_112是必须要有
阅读全文
摘要：环境：linux centos6.5 1.安装erlang 下载rpm仓库：wget http://packages.erlang-solutions.com/erlang-solutions-1.0-1.noarch.rpm 安装rpm仓库rpm -Uvh erlang-solutions-1.0
阅读全文
摘要：解决办法 转自网友： 亲测 解决了问题@ MySql默认是不支持这种骚操作的，但是并不代表不能实现，只需要在jdbc的配置文件中稍做配置： driver=com.mysql.jdbc.Driverurl=jdbc:mysql://127.0.0.1:3306/airipo?useUnicode=tr
阅读全文
摘要：针对 404 其实 springmvc 提供了2种方式 404 是比较特殊的 1.先设置dispatcherServlet @Bean public ServletRegistrationBean dispatcherRegistration(DispatcherServlet dispatcher
阅读全文
摘要：这个jar 其实在common 中也是存在的 ，当时没注意看，就导入进来了，然后 css js 等一些静态资源全部不能加载！具体原因我没去深挖！后面找个时间深挖下，先填坑！
阅读全文
