摘要: 一、简介 1.kafka是一个分布式的、可分区的、可复制的消息系统。它提供了消息系统的功能,但是有自己独特的设计。 2.名词解释: (1)topic:kafka将罅隙以topic为单位 (2)producer:向kafka发送消息的程序 (3)consumer:将预定topics并消费的程序 (4) 阅读全文
posted @ 2018-09-16 14:09 stone1234567890 阅读(240) 评论(0) 推荐(0) 编辑
摘要: 1.大数据可视化:通过报表 2.项目来源:电信运营商通过电话交换机来记录每一组通话,用exe tail-flume来进行数据的收集,利用kafka来消费数据。 数据在hbase中要避免热点问题,由于大量数据拥塞在Hbase集群的一个或者几个节点上,造成热点问题的主要问题就是rowKew设计不当。避免 阅读全文
posted @ 2018-09-16 14:08 stone1234567890 阅读(122) 评论(0) 推荐(0) 编辑
摘要: break 跳出循环; continue 继续循环,(不执行 循环体内continue 后面的语句,直接进行下一循环) return 跳出函数,返回调用函数 处。 如以下语句 int i = 0; while(1) // < . { // | i++; // | if( i % 2 ) //如果 i 阅读全文
posted @ 2018-09-16 08:24 stone1234567890 阅读(201) 评论(0) 推荐(0) 编辑
摘要: 1.单例对象。Scala没有静态方法或字段,可以使用object这个语法结构来达到同样的目的。对象定义了单个实例,包含了你想要的特性。 Scala没有静态的概念,如果需要定义静态成员,可以通过object来实现 编译完成后,会生成对应的类,方法都是静态方法,非静态成员对应到单例类中去。 单例类以Ut 阅读全文
posted @ 2018-09-16 07:22 stone1234567890 阅读(142) 评论(0) 推荐(0) 编辑