2025 年 1 月 21 日 – 云原生计算基金会(CNCF)正式对外官宣 CubeFS 成为其毕业项目。CubeFS正式从 CNCF 毕业,标志了 CubeFS 的技术生态受到全球业界广泛认可,云原生存储技术迈入了成熟新阶段。
OPPO互联网技术 TAC(技术决策委员会)主席邓华荣表示:“自开源以来,CubeFS 持续获得了业界伙伴与用户的关注和支持,已广泛应用于 AI、大数据、容器平台、存算分离等领域;作为首个由中国人主导开源的具备完整存储功能的产品,填补了行业在高性能、易运维、云原生开源分布式存储领域的空白。”
OPPO 云计算 TMG(技术管理委员会)负责人、CubeFS TSC 何小春表示:“ CubeFS 是 OPPO 在云基础设施领域的重要开源贡献,推动了云原生技术在存储场景的创新实践,为云+AI 时代业务提供了关键支撑;未来我们将继续推进开源创新,同全球伙伴共建繁荣的开源生态。”
毕业一览
CubeFS 架构介绍
CubeFS 是一个开源分布式存储系统,支持 POSIX、HDFS、S3 等访问协议及其自身的 RESTful API。它可以用于许多场景,包括大数据、人工智能、容器平台、数据库和中间件的存算分离、数据共享与备份等。
作为一站式存储服务平台,CubeFS 具备多协议、可扩展元数据、混合云支持等诸多特性,拥有优秀的扩展性和容灾能力,在性能方面也表现卓越。
CubeFS 的持续开源运营,旨在以 OPPO 互联网后端技术及云原生实践经验反哺社区,晋升为毕业项目也意味着全球顶级技术基金会对 OPPO 云原生技术演进的认可,同时验证了 OPPO 在云基础领域的深厚积累及对未来技术趋势的深刻洞察。
CubeFS 发展历程
CubeFS 项目成立于 2017 年。2019 年 12 月被接受进入 CNCF 沙箱,2022 年进入孵化,2024 年正式毕业。
自加入 CNCF 以来,用户数量增长了 1900%,从 10 个增加到 200 个;社区贡献增长了 1415%,从 1112 次增加到 16845 次;贡献者数量增长了 1300%,从 5 家公司中的 27 人增加到 42 家公司中的 379 人。
用户已经在生产环境中使用 CubeFS 多年,管理数百 PB 的数据,并支持数十万客户端的访问。主要用户的总存储规模预计到 2025 年初已经达到了 350PB。该项目在商业、云存储和在线媒体流等领域得到了广泛应用,用户包括京东、OPPO、网易等。尤为值得一提的是,CubeFS 所有特性均向社区开放,这使其具有更高的透明度和更强的持续性,能够更好地与不同参与方协作,促进社区的蓬勃发展。
在 2024 年 11 月北美 KubeCon 大会上发布的 CNCF 技术景观雷达报告中,在 Batch/AI/ML 计算技术领域,开源分布式存储系统 CubeFS 与 Apache Airflow、Kubeflow 等一同处于技术雷达的 “采用(adopt)” 位置,实用性评分达 +40,跻身前四,是 Batch/AI/ML 相关项目中的最成熟和已经被 Adopt 的少数项目之一。
“像 OPPO 这样的组织已经开始使用 CubeFS 来运行大规模的机器学习平台,并进行 AI 训练。”CNCF 首席技术官 Chris Aniszczyk 表示。“CubeFS 的稳定性、可靠性能和活跃社区赢得了用户的信任,我们期待看到随着 AI 和机器学习的进一步发展,CubeFS 的采用将如何演变。”
项目用户
“CubeFS 在 OPPO 被广泛应用,应用于大规模 AI、大数据和数据库存算分离等业务场景。它的存储协议层支持 S3、POSIX、HDFS 语义,存储引擎层支撑多副本和纠删码;其特性丰富,功能强大,展现出良好的稳定性和持续迭代能力,带来了卓越的用户体验。”—— OPPO 王红岩
“CubeFS 提供了强大且可扩展的存储解决方案,给网易带来了显著的收益,增强了自身的云服务能力。该项目的稳定性和明确的范围与路线图赢得了网易的信任,使其成为云原生基础设施需求的可靠组成部分。”—— 网易 张锐
“CubeFS 在处理极端场景和满足企业需求方面表现出色。京东建议该项目可以通过更多社区活动和更广泛的推广来充分发挥其潜力。”—— 京东 张墨飞
“CubeFS 的产品功能日益完善,尤其是在 AI 业务场景中。在满足性能的同时,它兼具成本、可靠性和回收站等特性,能够很好地满足业务使用的需求。该项目的稳定性和业务特性技术设计文档对我们使用 CubeFS 非常有帮助。”—— Shopee 黄福堂
“小米的内部存储服务利用 CubeFS 的许多优秀特性来应对各种复杂存储场景。得益于其卓越的架构设计,CubeFS 提供了出色的可扩展性,能够支持数百亿个文件和 PB 级数据容量。此外,该项目拥有一个活跃的社区,提供丰富的功能和稳定可靠的服务质量。”—— 小米 佳朋
项目维护者
“云原生是一个非常广泛的场景,生态系统将继续改善,这也需要存储解决方案的发展。我们期待与社区合作,构建最全面的存储解决方案,以应对日益增长的存储需求。”—— CubeFS 维护者 常亮
“期待进一步增强 CubeFS 的能力和生态系统,确保其符合行业标准和最佳实践,并培养项目维护者,以促进项目的持续发展。” —— CubeFS 维护者 曾雪伟
“期待与社区合作,将 CubeFS 发展成为最可靠的分布式存储解决方案,以满足用户各种存储需求。”—— CubeFS 维护者 张墨飞
“CubeFS 是首个完整的具备所有存储功能的 CNCF 毕业的开源项目。作为一个毕业的 CNCF 项目,我们可以吸引更多贡献者,推动 CubeFS 的更深层次迭代和演进。这将帮助我们构建一个集成的数据引擎,以解耦产品和存储引擎,让用户更好地专注于各自能力的发展。”—— CubeFS 维护者 沈杰
未来规划
CubeFS 将继续关注产品质量、稳定性、自动化运营能力,聚焦 AI、大数据、在线服务等领域,通过持续技术创新支撑业务需求,简化大规模数据存储与管理成本,同时通过分布式缓存加速、冷热分层等能力建设,增强在公有云/混合多云场景下的业务支撑能力。
了解更多关于 CubeFS 的信息,请访问:
代码仓库: https://github.com/cubefs/cubefs
文档: https://cubefs.io/zh/docs/master/overview/introduction.html
Slack: cubefs.slack.com
评论