2015年8月5日

SparkSQL JSON数据操作(1.3->1.4)

摘要: 1.用户自定义schemadatajson串格式如下:{ "partner_code": "demo", "app_name": "web", "person_info": { "name": "张三", "age": 18 },... 阅读全文

posted @ 2015-08-05 23:00 毛小娃 阅读(178) 评论(0) 推荐(0) 编辑

kafka管理器kafka-manager部署安装

摘要: 运行的环境要求Kafka 0.8.1.1+sbt 0.13.xJava 7+功能为了简化开发者和服务工程师维护Kafka集群的工作,yahoo构建了一个叫做Kafka管理器的基于Web工具,叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中的哪些topic分... 阅读全文

posted @ 2015-08-05 17:02 毛小娃 阅读(176) 评论(0) 推荐(0) 编辑

Kafka集群模式部署

摘要: 环境:kafka 0.8.1.1基本概念Kafka维护按类区分的消息,称为主题(topic)生产者(producer)向kafka的主题发布消息消费者(consumer)向主题注册,并且接收发布到这些主题的消息kafka以一个拥有一台或多台服务器的集群运行着,每一台服务器称为bro... 阅读全文

posted @ 2015-08-05 10:39 毛小娃 阅读(137) 评论(0) 推荐(0) 编辑

导航