产品
JuiceFS 社区版
JuiceFS 云服务
解决方案
按场景
AI 与 机器学习
大数据
Kubernetes
按行业
量化投资
自动驾驶
为什么使用 JuiceFS?
产品初心、开发故事、设计理念
深入了解
社区
文档
社区版文档
云服务文档
JuiceFS CSI 驱动文档
博客
定价
登录
控制台
联系我们
English
Open main menu
产品
社区版
云服务
解决方案
按场景
AI 与 机器学习
大数据
Kubernetes
按行业
量化投资
自动驾驶
社区
文档
社区版文档
云服务文档
JuiceFS CSI 驱动文档
博客
定价
登录
控制台
联系我们
English
解决方案
用户案例
解决方案
版本发布
使用技巧
工程技术
公司
全部
归档
RSS
全部
Hadoop 上云
基于 JuiceFS 的大数据平台上云:存储成本省 85%,性能媲美 HDFS
2024-01-10
JuiceFS 资深用户
本案例来自社区一家从事金融科技的用户。该用户在进行数据平台上云时,首个站点采用了与本地数据中心(IDC)相同的架构,在云主机上构建了基于 Hadoop 的技术栈。随着业务的迅速增长和更多站点的上线,该架构面临了一系列挑战,包括块存储成本高昂、Hadoop 组件复杂、弹性能力有限等。
多点 DMALL:大数据存算分离下的存储架构探索与实践
2023-08-16
李铭
本文分享了多点DMALL 存算分离的云原生大数据架构的经验和挑战,并用 JuiceFS 社区版实现了与 Ranger 组件进行权限的对接
网易互娱出海之旅:大数据平台上云架构设计与实践
2023-08-09
柯维鸿
网易互娱大数据离线计算平台选择了 JuiceFS 来帮助实现 Hadoop 上云,并给下游数据业务和分析部门提供了完整 Hadoop 的兼容性,避免所有业务逻辑推倒重来;给游戏数据业务出海节省了大量存储和算力成本。
云上大数据存储:探究 JuiceFS 与 HDFS 的异同
2023-04-04
汤友棚
HDFS 作为 Hadoop 提供存储组件,已经成为大数据生态里面数据存储最常用的选择,通常在机房环境部署。JuiceFS 是一个基于对象存储的分布式文件系统,用户可以在云上快速地搭建按需扩容的弹性文件系统。如果企业正在考虑在云上构建大数据平台,了解这两种产品的差异和优缺点,可以为企业迁移或切换存…
存算分离实践:JuiceFS 在中国电信日均 PB 级数据场景的应用
2023-03-17
杨磊
中国电信大数据团队需要处理数据形式多,数据流转过程复杂,涉及 31 省位置,DPI 等数据,大数据平台需加工聚合后再供各业务方使用。面对上述痛点,团队最终选择 Hadoop 3+JuiceFS+TiKV+Ceph 方案进行存算分离改造,打通 Hadoop 生态与 Ceph 对象存储,实现多集群数据…
从 Hadoop 到云原生, 大数据平台如何做存算分离
2022-09-14
苏锐
关于作者: 苏锐,Juicedata 合伙人, JuiceFS 的1号成员,一直深度参与在开源社区中支持开发者使用 JuiceFS。历任互联网 O2O 汽车服务品牌功夫洗车创始人 & CEO,豆瓣电影 PM & Tech Lead。在工作期间,经历了早期由 Hadoop 技术栈主导…
理想汽车:从 Hadoop 到云原生的演进与思考
2022-08-30
聂磊
理想大数据平台最初主要以 Hadoop 技术栈来搭建,随着理想汽车业务发展持续向好,数据平台管理的车辆数据增长极快,这对数据平台的敏捷性和弹性都提出了更高的要求。于是,理想汽车数据平台开始进行存算分离改造,在替换HDFS 过程中,JuiceFS 在理想汽车有了深入的应用。
一面数据:Hadoop 迁移云上架构设计与实践
2022-07-28
刘畅&李阳良
一面数据原有的技术架构是在线下机房中使用 CDH 构建的大数据集群。自公司成立以来,每年都保持着高速增长,业务的增长带来了数据量的剧增,为了解决包括扩容周期长、计算存储资源不匹配以及高昂的运维成本等这些问题,我们基于 JuiceFS对数据架构进行改造,将数据迁移到云端,采用存算分离的结构。总存储量…
为什么说存储和计算分离的架构才是未来?
2018-07-08
Davies, CEO & Founder
这篇文章的标题是我们过去几个月经常和客户探讨的一个问题,也是很多大公司正在思考的问题,在这里分享一下我们的观点和经验。二十年前,大规模存储一般使用的是专有硬件设备方案(NAS),通过特殊的高性能通讯硬件给其他应用提供访问接入。这种方案不太容易扩展,而且价格昂贵,无法满足互联网的高速下的超大规模数据…
博客分类
用户案例
解决方案
版本发布
使用技巧
工程技术
公司
热门主题
AI 存储
Hadoop 上云
归档
RSS
产品
社区版
云服务
解决方案
AI 与 机器学习
大数据
Kubernetes PV
自动驾驶行业
量化交易行业
资源
社区版文档
云服务文档
JuiceFS CSI 驱动文档
社区
博客
加入 Slack 频道
公司
工作机会
关于 Juicedata
联系我们
服务条款
隐私政策
热门主题
Kubernetes CSI 驱动
ClickHouse 存算分离
CephFS vs. JuiceFS
Alluxio vs. JuiceFS
S3FS vs. JuiceFS
分布式文件系统架构对比
POSIX 兼容性对比
Copyright 2017-2024 Juicedata, Inc All rights reserved.
浙 ICP 备 2020035874 号
GitHub
Slack
Twitter
LinkedIn
Bilibili