2019年11月21日

案例：使用logstash收集游戏服务器日志，输出到kafka消息队列中,然后存入ES
摘要： gamelogs2kafka.conf kafka2es.conf 数据格式 阅读全文
posted @ 2019-11-21 20:45 勇者无畏强者无敌 阅读(751) 评论(0) 推荐(0)

2019年11月12日

Spark Core知识点复习-2
摘要： day1112 一. Spark Core回顾 1 集群启动 2 任务提交 3 缓存 4 checkPoint 5 自定义排序 6 自定义分区器 7 自定义累加器 8 广播变量 9 Spark Shuffle过程(重要) 10 SparkSQL 阅读全文
posted @ 2019-11-12 20:26 勇者无畏强者无敌 阅读(200) 评论(0) 推荐(0)
Spark Core知识点复习-1
摘要： Day1111 一.Spark Core 1 Spark任务调度: 2 Spark几个重要的组件 3 Spark Core: RDD的概念和特性 4 生成RDD的两种类型 5 RDD算子的两种类型 6 算子练习 7 分区 8 RDD的依赖关系 9 DAG 阅读全文
posted @ 2019-11-12 11:11 勇者无畏强者无敌 阅读(385) 评论(0) 推荐(0)

导航