登录
联系我们
English
博客
用户案例 解决方案 版本发布 使用技巧 工程技术 公司 全部 归档 RSS
大模型存储选型 & JuiceFS 在关键环节性能详解

大模型存储选型 & JuiceFS 在关键环节性能详解
2024-10-09
李少杰
在本文介绍了对大模型存储选型的思考、开发中不同阶段的工作负载需求，包括成本、性能和功能等多个维度，并探讨如何通过 JuiceFS 帮助用户优化这些环节
Hugging Face + JuiceFS：多用户多节点环境下提升模型加载效率

Hugging Face + JuiceFS：多用户多节点环境下提升模型加载效率
2024-09-29
于鸿儒（Herald Yu）
本文介绍了 JuiceFS 作为 Hugging Face Transformers 的数据缓存目录的两种方法，分别是将 JuiceFS 预先挂载到 Hugging Face 缓存目录，以及通过环境变量指定 Hugging Face 缓存目录。
大模型训练：K8s 环境中数千节点存储最佳实践

大模型训练：K8s 环境中数千节点存储最佳实践
2024-09-25
朱唯唯
JuiceFS CSI 助力大模型训练，在K8s 环境中数千节点存储实践。
JuiceFS 企业版 5.1：新增可写镜像、Python SDK 多项特性 ，强化 AI 场景支持

JuiceFS 企业版 5.1：新增可写镜像、Python SDK 多项特性 ，强化 AI 场景支持
2024-09-14
Juicedata Team
JuiceFS 企业版 5.1 正式发布，为了更好地适应企业在多云和混合云架构下的数据管理，支持更广泛的 AI 应用场景，新版本增添了多项新特性，并在系统性能、可观测性方面等进行了全面的优化。
Ollama + JuiceFS：一次拉取，到处运行

Ollama + JuiceFS：一次拉取，到处运行
2024-09-09
朱唯唯
在使用 Ollma 进行大模型加载时，尝试使用了 JuiceFS 进行模型共享，JuiceFS 的数据预热和分布式缓存功能显著提升了加载效率，优化了性能瓶颈问题
性能、成本与 POSIX 兼容性比较： JuiceFS vs EFS vs FSx for Lustre

性能、成本与 POSIX 兼容性比较： JuiceFS vs EFS vs FSx for Lustre
2024-09-04
白伯纯
在本文中，我们将通过一系列测试，来评估这三种主流文件系统的性能与成本表现，帮助用户快速了解这些产品。
Clobotics 计算机视觉场景存储实践：多云架构、 POSIX 全兼容、低运维的统一存储

Clobotics 计算机视觉场景存储实践：多云架构、 POSIX 全兼容、低运维的统一存储
2024-08-30
Jonnas
Clobotics 是一家将计算机视觉和机器学习技术应用于风电以及零售行业的企业。在风电行业，Clobotics 利用无人机对风力发电机叶片进行检查，显著降低了对人工作业的依赖。在零售领域，公司通过分析捕获的包装商品图像来提供基于实时数据的洞察，以增加销售额并减少运营成本。
MiniMax：如何基于 JuiceFS 构建高性能、低成本的大模型 AI 平台？

MiniMax：如何基于 JuiceFS 构建高性能、低成本的大模型 AI 平台？
2024-08-30
Juicedata Team
MiniMax 选择了 JuiceFS 企业版作为公司级 AI 平台的存储底座，支持上层各类模型（包括文本大模型、语音大模型、图像大模型、多模态模型）在数据清洗、模型训练、模型推理等场景上的高性能数据访问需求。
JuiceFS 在多云架构中加速大模型推理

JuiceFS 在多云架构中加速大模型推理
2024-08-23
高昌健
JuiceFS 在多云架构中加速大模型推理，本文将基于我们的实践，详细介绍企业版在此场景下的相关特性。