12 2024 档案

摘要:StarRocks版本在3.1.4及以下,并且使用了metadata_journal_skip_bad_journal_ids来跳过某个异常的journal,会导致FE元数据无法合并。 阅读全文
posted @ 2024-12-27 17:25 一条路上的咸鱼 阅读(115) 评论(0) 推荐(0) 编辑
摘要:一、背景 在通用的数据开放平台中,支持用户编写基于Groovy脚本的接口,Groovy脚本中可以查询数据库,然后对数据库中的数据进行一些处理。平台支持任何接口都可以启用缓存。 缓存不是缓存整个脚本的结果,而是只支持缓存数据库查询语句的结果,这样Groovy脚本中的其他逻辑依然可以处理数据。之前一直运 阅读全文
posted @ 2024-12-20 17:53 一条路上的咸鱼 阅读(26) 评论(0) 推荐(0) 编辑
摘要:本文介绍了从第一代基于Hadoop体系的离线数据同步,到第二代基于DolphinScheduler和StarRocks的改进方案,再到第三代基于Python自定义的离线数据同步的演变过程。每一代方案都在不断优化,以适应日益增长的数据量和复杂的业务需求。 阅读全文
posted @ 2024-12-05 10:10 一条路上的咸鱼 阅读(306) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示