写点什么

Gerrit 为何会选择 Buck

  • 2013-11-03
  • 本文字数:1649 字

    阅读完需:约 5 分钟

Shawn Pearce( Gerrit 项目的维护者)在不久前的 EclipseCon 上发表了题为使用Buck 改善Java 构建的演讲(幻灯片更多信息),该演讲谈到了Gerrit 项目从Maven 转移到Buck 背后的原因。从Gerrit 2.8 开始,项目的构建已经开始完全使用Buck 了。

Buck 是个构建系统,以 Google 的内部构建系统“blaze”为模型,它是由前 Google,现 Facebook 工程师开发的。在 Facebook,该构建系统是开源的,基于 Apache 许可,位于GitHub 上。Buck 基于Python 构建,不过在Gerrit 中它主要用来编译Java。

Buck 语言是个 DSL,使用 Python 作为底层构建文件。如下代码定义了一个名为“printy_lib”的 Java 库,它依赖于 Guava,后者位于文件系统的某处:

复制代码
<pre>
java_library(
name = 'printy_lib',
srcs = glob(['src/main/java/**/*.java']),
deps = [':guava'],
)
prebuilt_jar(
name = 'guava',
binary_jar = 'guava.jar',
)
</pre>

Gerrit 项目为从 Maven Central 中解析 JAR 提供了更多的支持,然后会将这些 JAR 下载到本地系统上。JAR 的内容是通过一个 GAV 标识的,并使用 SHA1 校验,在下载时就会进行验证。目前 Buck 还没有这些扩展,不过未来可能会被加上。

复制代码
<pre>
include_defs('//lib/maven.defs')
maven_jar(
name = 'guava',
id = 'com.google.guava:guava:14.0',
sha1 = '67b7be4ee7ba48e4828a42d6d5069761186d4a53',
license = 'Apache2.0',
)
</pre>

Buck 相对于 Maven 的主要优势在于速度非常快。这是由几个关键特性所决定的,构建可以跨模块并行执行,默认情况下,Buck 构建会执行 1.25xCPU 个线程(Maven 与 Make 也有能力执行并行的构建,不过依旧是并行构建模块而已)。如下数据展示了 Gerrit 速度上的改进

  • 清理构建 ```

    mvn package -Dmaven.{javadoc,test}.skip=true … 6m50s
    buck build :gerrit … 2m 3s
    buck test --all … 2m 5s

复制代码
- ** 空操作增量重构建 ** ```
mvn package -Dmaven.{javadoc,test}.skip=true ... 4m44s
buck build :gerrit ... 2s
  • Buck 很快,当在后台运行 buckd 时会快 ```

    ~/buck/bin/buckd
    time buck :gerrit … 0.5s

复制代码
由于在默认情况下有多线程支持,Buck 会通过增量构建,并且只重新编译那些改变的类来加快编译速度。相对于使用文件系统时间戳(并不是在所有系统上都是可靠的),Buck 使用了基于代码上一次编译时间的 SHA 内容匹配来获悉哪些源文件被修改了。散列还包含了构建文件的散列,因此如果构建系统被修改了,那么所有文件都会被重新编译。
Buck 还对 Java 关系有着详尽的了解,这样它就知道该如何构建相互依赖的类之间的关系,这可以确保只有在公共 API 发生变化时才会编译关系,而内部方法发生变化时则不会编译。
除了可以共享本地系统构建的内容外,我们还可以将 Buck 挂载到 Apache Cassandra 存储系统上,让多个开发者可以共享库。这成为了下载组件的一种仓库机制,这些组件可能已经被构建了,可能是老的版本,构建系统会解析这些情况。这样发现问题的速度就会大大加快,不必每次在解析了之前构建的内容后都要执行一次构建。由于内容是散列的,因此即便版本没有更新或者构建没有公开发布也可以执行构建。
速度上的提升可以实现更加灵活的开发。假如一个构建的执行时间不到一秒钟(如果运行着 Gerrit daemon),Gerrit 的开发构建会检测到它是否运行在开发模式下,然后对每次 HTTP 请求都会执行重新构建与重新加载。这样可以实现非常快的补丁修复与开发,无需花费数秒甚至是数分钟来执行重新构建与部署。
Buck 依旧在开发当中,或许目前缺乏 Gradle 所拥有的一些社区与文档。最后,虽然 Buck 使用 Java 编写,不过它使用 Python 作为其 DSL,测试主要在 Mac 与 Linux 上完成,这意味着目前的 Windows 支持被放在了第二位。
要想了解关于 Buck 的更多信息,请查看 [Facebook 的 Buck 描述页面](http://facebook.github.io/buck/)。
** 查看英文原文:**[Why Gerrit chose Buck](http://www.infoq.com/news/2013/10/gerrit-buck)
2013-11-03 08:411474
用户头像

发布了 88 篇内容, 共 265.0 次阅读, 收获喜欢 8 次。

关注

评论

发布
暂无评论
发现更多内容

工赋开发者社区 | 复杂电子装备制造数字化工厂实现逻辑与实施步骤

工赋开发者社区

2023 云原生编程挑战赛火热报名中!导师解析 Serverless 冷启动赛题

阿里巴巴云原生

阿里云 Serverless 云原生

Appuploader工具让ipa上传到App Store 的最新流程和步骤

开心档之CSS !important 规则

深入理解 HDFS(一):Block

冰心的小屋

hadoop hdfs 数据存储 文件分块 block

合并k个已排序的链表

芯动大师

工赋开发者社区 | 面向CPS的制造执行系统(MES)实验平台验证

工赋开发者社区

RLHF 技术:如何能更有效?又有何局限性?

Baihai IDP

人工智能 强化学习 白海科技 RLHF 大语言模型

Mac部署AIGC图片生成服务——基于stable-diffusion

珲少

Spring Boot学习路线1

小万哥

Java spring 后端 Sprint Boot Sprint Cloud

飞桨AI Studio可以玩多模态了?MiniGPT4实战演练!

飞桨PaddlePaddle

人工智能 百度 paddle 飞桨 百度飞桨

企业号 8 月 PK 榜,火热开启!

InfoQ写作社区官方

热门活动 企业号 8 月 PK 榜

未来前端框架将持续推进组件化开发

没有用户名丶

业务模块在你做之前,一定要多想呀?

Bonaparte

产品 产品经理 产品设计 产品思维 产品需求

CSS !important 规则

雪奈椰子

分享一些常用的开源博客社区网站

兮动人

博客 开源社区

iOS 应用上架流程详解

雪奈椰子

探索Linux命名空间和控制组:实现资源隔离与管理的双重利器

柠檬汁Code(binbin0325)

Linux 容器 namespace 底层原理 Cgroups

7月征文活动结果出炉,快来看看有没有你

InfoQ写作社区官方

热门活动 年中技术盘点

重塑思维模式,实践致富法则

少油少糖八分饱

读书笔记 分享 思维 搞钱 致富

活动回顾|火山引擎DataLeap分享:DataOps、数据治理、指标体系最佳实践(文中领取PPT)

字节跳动数据平台

数据中台 数据治理 抖音 DataOps 企业号 7 月 PK 榜

TypeScript 玩转类型操作之字符串处理能力

小乌龟快跑

typescript 面试 前端

面试官:说出 Java 中的 7 种重试机制

java易二三

编程 程序员 面试 计算机

使用Appuploader工具将IPA上传到App Store的最新流程和步骤

雪奈椰子

解决 go-zero 注册 etcd 出现 “Auto sync endpoints failed.” 的问题

非晓为骁

golang etcd go-zero etcd-client 服务注册发现

容器化应用程序的配置管理策略与实践

DS小龙哥

7月月更

如何为Spring和Mybatis增加可逆计算支持

canonical

Spring Boot mybatis 低代码 可逆计算 Nop平台

在 Go 语言单元测试中如何解决 MySQL 存储依赖问题

江湖十年

golang Web 后端 单元测试 测试 单元测试

直播平台源码开发,信息收发功能搭建

山东布谷科技

软件开发 直播 源码搭建 消息发送 直播平台源码

Gerrit为何会选择Buck_语言 & 开发_Alex Blewitt_InfoQ精选文章