09 2021 档案

常见开源分布式文件系统架构对比
摘要：什么是文件系统？ 文件系统是计算机中一个非常重要的组件，为存储设备提供一致的访问和管理方式。在不同的操作系统中，文件系统会有一些差别，但也有一些共性几十年都没怎么变化： 数据是以文件的形式存在，提供 Open、Read、Write、Seek、Close 等API 进行访问； 文件以树形目录进行组织， 阅读全文
posted @ 2021-09-29 16:47 JuiceFS 阅读(1487) 评论(0) 推荐(0) 编辑
JuiceFS v0.17 发布，通过 1270 项 LTP 测试！
摘要：小伙伴们大家好，JuiceFS v0.17 在国庆小长假来临之际如期发布了！这是我们在 2021 年秋季推出的第二个版本，让我们直奔主题，看看都有哪些新变化吧。 本次更新累计 80+ 提交，共有 9 位来自 JuiceFS 社区的小伙伴在 GitHub 上贡献代码。在这里，我们向每一位贡献者表示最诚 阅读全文
posted @ 2021-09-27 15:06 JuiceFS 阅读(210) 评论(0) 推荐(0) 编辑
如何借助 JuiceFS 为 AI 模型训练提速 7 倍
摘要：背景 海量且优质的数据集是一个好的 AI 模型的基石之一，如何存储、管理这些数据集，以及在模型训练时提升 I/O 效率一直都是 AI 平台工程师和算法科学家特别关注的事情。不论是单机训练还是分布式训练，I/O 的性能都会显著影响整体 pipeline 的效率，甚至是最终的模型质量。 我们也逐渐看到容 阅读全文
posted @ 2021-09-18 16:15 JuiceFS 阅读(292) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示