04 2023 档案

摘要:前言 这周的主要时间花在Flink上面,做了一个简单的从文本文件中读取数据,然后存入数据库的例子,能够正常的实现功能,但是遇到个问题,我有四台机器,自己搭建了一个standalone的集群,不论我把并行度设置多少,跑起来的耗时都非常接近,实在是百思不得其解。机器多似乎并不能帮助它。 把过程记录在此, 阅读全文
posted @ 2023-04-15 22:19 dk168 阅读(246) 评论(0) 推荐(0) 编辑
摘要:前言 这周主要是学习使用Flink, 其中有一部分学习的内容就是生成parquet。 Flink自身提供的文档写了个大概,但是真要自己动手去生成pqrquet文件,发现还是有些小坑,本文就是记录这些坑。 开始 官方文档总是最好的开始的地方, 下面是官方文档上面的内容 https://nightlie 阅读全文
posted @ 2023-04-08 11:48 dk168 阅读(553) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示