minio __XLDIR__ 后缀文件夹问题

最近在通过debug 模式调试dremio 文件写入处理的时候，发现dremio 目录包含了不少__XLDIR__ 后缀的对象（里边是空的，只是后缀包含了__XLDIR__ ）

参考图

问题

目前此问题minio github 上也有一些信息，理论上应该是解决了，但是我目前使用的是比较新的版本的，大致的问题应该是
网络延时比较大（在进行debug 的时候dremio 部分iceberg 表操作有异常了，造成文件清理不太正确）

解决方法

可以手工删除这类文件夹的信息（直接在数据目录下）

比较奇特的问题

假如我们手工创建了包含一个__XLDIR__ 对象路径的时候，minio 是不能直接看到的，如下（后边结合源码看看）

参考资料

https://github.com/minio/minio/issues/13111
https://github.com/minio/minio/pull/15477

posted on   荣锋亮  阅读(121)  评论(0)  编辑  收藏  举报

相关博文：
· dremio TemporaryFolderManager 简单说明
· dremio 20.1 官方release note 提供了
· .net minio 帮助类 minio4.0.1 解决文件占用文件
· 分布式文件存储Minio学习入门
· 8、Minio问题1：ERROR Unable to initialize backend: mkdir /data/.minio.sys: permission denied
阅读排行：
· 全程不用写代码，我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了，比商业数据库还牛
· .NET10 - 预览版1新功能体验（一）
历史上的今天：
2023-03-26 hilla 2.0 发布
2022-03-26 minio 4*4 集群 故障测试
2022-03-26 nocodb minio 集成试用
2022-03-26 nocodb 核心入口依赖
2022-03-26 minio 纠删码测试
2021-03-26 使用外部db 加速dremio 查询
2021-03-26 开发一个cube.js cratedb driver

导航

< 2025年3月 >
日 一 二 三 四 五 六
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示