摘要：
2020 年初，随着网易互娱的海外业务增长与海外数据合规的需求，我们开始了网易互娱大数据离线计算平台迁移出海的工作。前期，我们采取了云主机裸机加上高性能 EBS 块存储的方案。但是，这个方案存储费用高昂，成本是国内自建机房的数十倍。 于是，我们决定在公有云上构建一个平台，这个平台不仅需要更加适应当前 阅读全文
摘要：
随着企业数据量的持续增长，存储容量需求日益增大。如何采用没有容量上限的云存储替换本容量有限的本地磁盘，已成为广泛的需求和共识。特别是在企业中常用的 Samba 和 NFS 共享，如果能够使用云存储作为底层存储，就能有效解决存储扩容和本地磁盘损坏导致的数据丢失问题。 本文将以 Linux 系统为例，介 阅读全文
摘要：
伴随着公司业务的发展，数据量持续增长，存储平台面临新的挑战：大图片的高吞吐、超分辨率场景下数千万小文件的 IOPS 问题、运维复杂等问题。除了这些技术难题，我们基础团队的人员也比较紧张，负责存储层运维的仅有 1 名同事，因而组件的易用性，一直也是我们评估的重要维度。 我们尝试过文件系统包括有 NFS 阅读全文
摘要：
一面数据原有的技术架构是在线下机房中使用 CDH 构建的大数据集群。自公司成立以来，每年都保持着高速增长，业务的增长带来了数据量的剧增。 在过去几年中，我们按照每 1 到 2 年的规划扩容硬件，但往往在半年之后就不得不再次扩容。而每次扩容都需要花费大量精力。 **为了解决包括扩容周期长、计算存储资源 阅读全文
摘要：
Steve Kleiman 在 1986 年撰写了《[Vnodes: An Architecture for Multiple File System Types in Sun UNIX](https://www.semanticscholar.org/paper/Vnodes%3A-An-Arch 阅读全文
摘要：
在 1994 年，论文《[XFS 文件系统的可扩展性](http://www.scs.stanford.edu/nyu/02fa/sched/xfs.pdf)》发表了。自 1984 年以来，计算机的发展速度变得更快，存储容量也增加了。值得注意的是，在这个时期出现了更多配备多个 CPU 的计算机，并且 阅读全文
摘要：
随着人工智能技术的爆发，内容生成式人工智能（AIGC）成为了当下热门领域。除了 ChatGPT 之外，文本生成图像技术更令人惊艳。 Stable Diffusion，是一款开源的深度学习模型。与 Midjourney 提供的直接将文本转化为图像的服务不同的是它允许用户自行搭配并训练自己的图像风格，这 阅读全文
摘要：
> 今天，高性能计算结合人工智能技术正在推动科研创新。例如通过破解水稻基因密码推动作物育种从“试验选优”向“计算选优”发展，在医药领域快速分析分子与蛋白之间的相互作用，发现潜在的能够有效干预疾病发生的药物分子。 之江实验室就是上述科研创新的推动者，实验室由浙江省政府主导、浙江大学等院校支持、企业参与 阅读全文
摘要：
我们很高兴地宣布 JuiceFS v1.1-Beta 版本正式发布啦！这是一个功能丰富的版本，带来了许多实用的新功能和改进。在这个版本中我们新增了以下功能： - 目录配额：为目录设置配额限制，控制其大小和文件数 - 目录克隆：快速地复制目录及其内容，节省时间和空间 - 一键恢复回收站文件：一次性地恢 阅读全文
摘要：
今天继续与大家分享系列文章《[50 years in filesystems](https://blog.koehntopp.info/2023/05/05/50-years-in-filesystems-1974.html)》，由 [KRISTIAN KÖHNTOPP](https://chaos 阅读全文