QCon北京「鸿蒙专场」火热来袭!即刻报名,与创新同行~ 了解详情
写点什么

都推进到 95% 了,为什么 curl 还是放弃基于 Rust 开发了四年的 HTTP 后端替代

  • 2024-12-25
    北京
  • 本文字数:1925 字

    阅读完需:约 6 分钟

都推进到95%了,为什么curl还是放弃基于Rust开发了四年的HTTP后端替代

“实验结束了。我们努力了,但还是失败了。”


近日,知名开源项目 curl 的创始人 Daniel Stenberg 正式发文宣布,将放弃对基于 Rust 编写的 Hyper HTTP 后端的支持,并彻底移除相关代码


“四年前,我们开始在 curl 中添加对另一种 HTTP 后端的支持。它将使用一个基于 Rust 编写的库,名为 Hyper。我们的想法是引入一种替代的 HTTP 内部实现,让 curl/libcurl 使用它来代替本地实现。”Stenberg 在博客中写道。然而,这场实验在历经四年的努力后,以失败告终。

完成 95% 的工作只是开始?


这一尝试始于 2020 年,由 ISRG(Let’s Encrypt 背后组织)资助。当时的目标是通过 Rust 的内存安全特性,为 curl 用户提供一个更安全的 HTTP 后端实现。Stenberg 在早期的博客中写道。“通过 Hyper,我们能够让更多代码运行在内存安全语言中,而非完全依赖 C。”


尽管实验已经推进了一大半,甚至让 Hyper 后端通过了几乎所有测试用例,但如同 Stenberg 在最新的博文中所述,“我们完成了 95% 的开发工作,然而,最后那‘百分之几’的挑战,还是让我们不得不认输,放弃这个实验。”


目前来看,实验失败的两大关键原因如下:

  • 几乎没人有这需求:curl 的用户对 Hyper 没有兴趣;Hyper 的用户也不太关心让它兼容 curl。

  • 缺乏同时精通 C 和 Rust 的开发者来推进:Hyper 是用 Rust 写的,而 libcurl 库(curl 背后的“引擎”)是用 C 写的,需要一个“胶水层”来把它们连接起来。这需要开发者不仅对两种语言精通,还要深入理解它们的架构和协议,但目前没有合适的人去做这件事。


此外,早在 2020 年开始这个实验时,Stenberg 就提到过“Hyper 没有 C API”是一个棘手的挑战。

停滞与反思:Hyper 成为“负担”


在今年 4 月的另一篇推文中,Stenberg 就预示过这次实验的结局,他提出了发人深省的问题:“Hyper 支持是否值得继续?”——当时,Hyper 后端的开发工作已陷入停滞,过去半年内几乎没有人主动对其进行功能改进或优化。与此同时,用户对 Hyper 的需求仍然冷淡。


技术上,Hyper 后端的开发过程中还出现了多次反向调整。例如,例如,由于对 Hyper API 集成方式的理解偏差,而不得不移除对 HTTP/2 的支持,这直接导致无法正确实现 HTTP/2 的功能。


更大的问题在于,社区用户的需求和兴趣严重失衡:当下 Rust 用户更愿意直接使用 Hyper,而不是帮助让它支持 C 项目;而 curl 的现有用户对 Hyper 几乎没有兴趣。


社区中这两类用户的交集太小,已经无法为 Hyper 后端的持续开发提供足够的支撑。


面对多重困难,Stenberg 开始反思:“Hyper 的支持是否已经从一种探索创新的尝试,变成了拖累改进的负担?”显然,继续维护这一功能的成本已经超过了它的实际价值。


既然在短、中期内都看不到完成的希望,与其继续耗费资源,不如果断放弃——移除这部分代码,不仅可以大幅简化项目结构,还能提高整体的灵活性,为 curl 的未来发展留出更多空间。

用其他语言重写 curl?也几乎不可能


或许会有人提问,当初为什么不直接用 Rust 重写 curl 呢?Stenberg 早就明确表示,这从来不在他们的计划之中。


一方面,curl 是一个老牌开源软件,已经运行了 25 年。对于 libcurl 用户来说,稳定的接口(API)、应用二进制接口(ABI)、一致的行为,以及文档中定义的所有功能选项,都是不可动摇的基础。重写代码不仅意味着要重新开发所有功能,还需要确保新版本完全兼容旧版,这对任何项目来说都是一项巨大而复杂的挑战。即使是那些考虑过这样做的大型企业,最终也都放弃了这个想法。


与此同时,Stenberg 等人也深知,curl 必须不断引入新功能,才能跟上技术的发展步伐。于是,Hyper 后端支持方案成为他们探索的方向。


虽然 Hyper 实验以失败告终,但它对 curl 和 Hyper 项目都带来了积极影响。Stenberg 表示,curl 在与 Hyper 集成的过程中,改进了自身对 HTTP 的严格性,并优化了代码结构,而 Hyper 则通过与 curl 的合作获得了宝贵的反馈,进一步提升了自身的稳定性和性能。


他强调:“虽然 Hyper 已被移除,但我们依然对未来引入 Rust 或其他语言的安全后端持开放态度。与 2020 年那会相比,我们现在已经拥有了更好的内部架构可供借鉴。只要用户需求足够明确,并且有足够的资源支持,我们还可能会重新尝试类似的整合。”


尽管 Hyper 被放弃,curl 仍然在推进对两个 Rust 编写的后端的支持::rustls(用于 TLS)和 quiche(用于 QUIC 和 HTTP/3),它们被认为比 Hyper 更易于维护。


据悉,Hyper 的相关代码已于 2024 年 12 月 21 日从 curl 的代码库中删除,并将在 2025 年 2 月发布的 curl 8.12.0 版本中完全失效。


参考链接:

https://daniel.haxx.se/blog/2024/12/21/dropping-hyper/

https://daniel.haxx.se/blog/2020/10/09/rust-in-curl-with-hyper/

https://curl.se/mail/lib-2024-04/0021.html

2024-12-25 17:1110891

评论 2 条评论

发布
用户头像
行百里者半九十的经典案例。

尽管实验已经推进了一大半,甚至让 Hyper 后端通过了几乎所有测试用例,但如同 Stenberg 在最新的博文中所述,“我们完成了 95% 的开发工作,然而,最后那‘百分之几’的挑战,还是让我们不得不认输,放弃这个实验。”

2024-12-26 18:46 · 北京
回复
用户头像
用其它语言来实现curl,不是不可能,而是没有必要。
2024-12-26 17:42 · 陕西
回复
没有更多了

发挥云网融合优势,天翼云为政企铺设数字化转型跑道

天翼云开发者社区

数字化转型 数字化基础 云网融合

魔豹联盟:佛萨奇2.0dapp系统开发模式详情

开发微hkkf5566

实现客户服务自助,打造产品知识库

Baklib

Axure9的元件用法

乔乔

签约计划第三季 8月月更

Java J.U.C 学习笔记-使用篇(一)

U2647

Spring Boot整合Mybatis

JAVA活菩萨

Java 程序员 后端

什么是现场服务管理系统(FSM)?有什么好处?

优秀

企业管理系统 现场管理

一款好用的FAQ搭建工具

Geek_da0866

是什么,让中国成为一台超级计算机?

脑极体

4KMILES加入艾盛集团,以更强劲的数字商务能力,加速中国跨境电商的全域全效增长

极客天地

面试官:可以谈谈乐观锁和悲观锁吗

JAVA活菩萨

面试官

麦聪DaaS平台 3.7.0 Release 正式发布:全面支持国际化

雨果

DaaS数据即服务

Linux Lab 编译 riscv-gnu-toolchain

贾献华

8月月更

【CSS】基础选择器,包括标签选择器、类选择器、id选择器和通配符选择器...

翼同学

CSS html 前端 HTML5, CSS3 8月月更

企业云成本管控,你真的做对了吗?

Kyligence

云成本管控 云成本分析

开源一夏 |【云原生】DevOps(五):集成Harbor

是Dream呀

天翼云4.0来了!千城万池,无所不至!

天翼云开发者社区

云计算 云平台

DevOps之代码检查

凌云Cloud

DevOps 研发管理 代码检查器

连续三次 | 灵雀云入选Gartner中国ICT技术成熟度曲线报告

York

云计算 云原生 数字化转型 ICT Gartner

竞赛:糖尿病遗传风险检测挑战赛(科大讯飞)

Lingxw

数据挖掘 Kaggle 8月月更

开源一夏 | 计算机网络:物理层

是Dream呀

开源

MyBatis操作数据库

JAVA活菩萨

Java 程序员 后端

关于 01 背包问题

HelloWorld杰少

8月月更

Mqtt开发笔记:windows下C++ ActiveMQ客户端介绍、编译和使用

JAVA活菩萨

Java 程序员 后端

读书笔记之《你想过怎样的一生?》

宇宙之一粟

读书笔记 8月月更

线程池原理与实践|从入门到放弃,深度解析

领创集团Advance Intelligence Group

线程池 内存溢出 线程池工作原理

MOSN 反向通道详解

SOFAStack

开源 网络安全 Go 语言 社区贡献 MOSN

千万级QPS下服务如何才能平滑启动

HelloGeek

微服务架构 Service Mesh 高并发优化

深入理解IO流(第一篇)

JAVA活菩萨

Java 程序员

开源一夏 | Web开发(七):登录实现及功能测试

是Dream呀

从技术全景到场景实战,透析「窄带高清」的演进突破

阿里云CloudImagine

云计算 直播 视频

都推进到95%了,为什么curl还是放弃基于Rust开发了四年的HTTP后端替代_后端_罗燕珊_InfoQ精选文章