摘要:
11-flink如何正确分流 11-flink如何正确分流 分流方式 filter分流 split分流 (只能一次分流,分流后的流不能继续分流) side output分流 (推荐使用) 场景 flink-分流场景.png 输入数据: {"key":"001","type":"1","data":" 阅读全文
摘要:
Flink SideOutput 和 Filter 分流对比 Flink 分流有Filter、Split(已经废弃移除)、Side Output进行分流,到底时有什么区别,哪个种更好呢? 对比 代码对比 直接上代码对比: import org.apache.flink.streaming.api.d 阅读全文
摘要:
flink入门1-Flink使用socketTextStream对接netcat完成入门demo 一、flink介绍 1、flink是什么 flink是一个面向流处理和批处理的分布式计算框架,即支持流处理,也支持批处理。flink基于流处理引擎实现,正真做到了流处理,将批处理看作一种特殊的有界流fl 阅读全文
摘要:
Windows 10 安装和使用Netcat Windows 10 安装和使用Netcat 简介: Netcat简称nc,netcat是网络工具中的瑞士军刀,它能通过TCP和UDP在网络中读写数据,通过与其它工具结合和重定向,你可以在脚本中以多种方式使用它,使用netcat命令能够完成很多实验。 1 阅读全文
摘要:
java随机生成姓名 java随机生成名字 随机生成昵称package com.sectrans.trans.controller; import java.io.UnsupportedEncodingException; import java.util.HashSet; import java. 阅读全文
摘要:
5、flink任务中可以使用哪些转换算子(Transformation) 1、什么是Flink中的转换算子 在使用 Flink DataStream API 开发流式计算任务时,可以将一个或多个 DataStream 转换成新的 DataStream,在应用程序中可以将多个数据转换算子合并成一个复杂 阅读全文
摘要:
练习 : Flink 读取 data.txt(json格式文件)文件并进行解析,写入到mysql中 bean //实体类 mysql的一条记录 package bean; import lombok.AllArgsConstructor; import lombok.Data; import lom 阅读全文
摘要:
【Kafka学习-3】Kafka命令 Kafka的命令都是基于bin目录下的脚本来使用的。 Topic命令 Topic的命令脚本是kafka-topics.sh,常见命令参数说明: --bootstrap-server <String: server toconnet to> 连接的Kafka Br 阅读全文
摘要:
Scala Json 转化 scala中使用json,比java中使用json复杂一些。尝试了json-smart;fast json; gson;json4s以及scala自带的json。 总结如下: 1. 普通json string 转化 object, 使用JSON.pareseFull 。 阅读全文
摘要:
Java 中FastJson的使用【吃透FastJson】 如果不了解JSON格式,建议先看下:JSON数据格式【学习记录】 JSON序列化、反序列化JavaBean的框架有很多,最常见的Jackson、阿里巴巴开源的FastJson、谷歌的GSON、apache提供的json-lib等,下面我们主 阅读全文