迁移到平台

报告问题 查看源代码 每夜 build · 7.4 . 7.3 · 7.2 · 7.1 · 7.0 · 6.5

Bazel 针对多架构和交叉编译 build 提供了完善的支持,可用于对平台工具链进行建模。

本页面总结了此支持的状态。

另请参阅:

状态

C++

设置 --incompatible_enable_cc_toolchain_resolution 后,C++ 规则会使用平台选择工具链。

这意味着,您可以使用以下方式配置 C++ 项目:

bazel build //:my_cpp_project --platforms=//:myplatform

而不再使用旧版:

bazel build //:my_cpp_project` --cpu=... --crosstool_top=...  --compiler=...

Bazel 7.0 中默认启用该功能 (#7260)。

如需使用平台测试 C++ 项目,请参阅迁移项目配置 C++ 工具链

Java

Java 规则使用平台来选择工具链。

此标志用于替换旧版标志 --java_toolchain--host_java_toolchain--javabase--host_javabase

如需了解详情,请参阅 Java 和 Bazel

Android

设置 --incompatible_enable_android_toolchain_resolution 后,Android 规则会使用平台选择工具链。

这意味着,您可以使用以下方式配置 Android 项目:

bazel build //:my_android_project --android_platforms=//:my_android_platform

而不是使用 --android_crosstool_top--android_cpu--fat_apk_cpu 等旧版标志。

在 Bazel 7.0 中,此功能将默认启用 (#16285)。

如需使用平台测试 Android 项目,请参阅迁移项目

Apple

Apple 规则不支持平台,尚未安排支持。

您仍然可以将平台 API 与 Apple build 搭配使用(例如,在混合使用 Apple 规则和纯 C++ 进行构建时),只需使用平台映射即可。

其他语言

如果您拥有语言规则集,请参阅迁移规则集以添加支持。

背景

引入平台工具链是为了标准化软件项目如何定位到不同的架构并进行交叉编译。

我们之所以提出这个想法,是因为发现语言维护者已经在以临时且不兼容的方式执行此操作。例如,C++ 规则使用 --cpu--crosstool_top 声明目标 CPU 和工具链。这两种方法都无法正确对“平台”进行建模。这会生成不合适且不正确的 build。

Java、Android 和其他语言都针对类似用途开发了自己的标志,但这些标志之间无法互操作。这使得跨语言 build 变得混乱且复杂。

Bazel 适用于大型、多语言、多平台项目。这需要对这些概念提供更具原则性的支持,包括明确的标准 API。

需要迁移

升级到新 API 需要完成两项工作:发布 API 并升级规则逻辑以使用该 API。

第一个已经完成,但第二个仍在继续。这包括确保定义了特定于语言的平台和工具链、语言逻辑通过新 API(而非 --crosstool_top 等旧标志)读取工具链,以及 config_setting 基于新 API(而非旧标志)进行选择。

这项工作很简单,但需要针对每种语言做出不同的努力,还需要向项目所有者发出公平的警告,以针对即将发生的变更进行测试。

因此,这项迁移是一项持续性工作。

目标

当所有项目均使用以下形式进行构建时,此迁移即告完成:

bazel build //:myproject --platforms=//:myplatform

这意味着:

  1. 您项目的规则会为 //:myplatform 选择合适的工具链。
  2. 项目的依赖项会为 //:myplatform 选择合适的工具链。
  3. //:myplatform 引用 CPUOS 和其他通用的与语言无关的属性的常见声明
  4. 所有相关的 select() 均与 //:myplatform 正确匹配。
  5. //:myplatform 在一个清晰且易于访问的位置进行定义:在项目的代码库中(如果平台是您的项目独有的平台),或者所有使用方项目都可以在某个常见位置找到它

--cpu--crosstool_top--fat_apk_cpu 等旧标志将在安全时废弃并移除。

最终,这将成为配置架构的唯一方式。

迁移项目

如果您使用支持平台的语言进行构建,您的 build 应该已经可以使用如下调用:

bazel build //:myproject --platforms=//:myplatform

如需了解确切详情,请参阅状态和您所用语言的文档。

如果某种语言需要标志才能启用平台支持,您还需要设置该标志。如需了解详情,请参阅状态

为了构建项目,您需要检查以下内容:

  1. //:myplatform”必须存在。由于不同的项目定位到不同的机器,因此定义平台通常是项目所有者的责任。请参阅默认平台

  2. 您要使用的工具链必须存在。如果使用库存工具链,语言所有者应包含有关如何注册它们的说明。如果您要编写自己的自定义工具链,则需要在 WORKSPACE 中或使用 --extra_toolchains register它们。

  3. select()配置转换必须正确解析。请参阅 select()转场

  4. 如果您的 build 混合了支持和不支持平台的语言,您可能需要平台映射来帮助旧版语言与新 API 搭配使用。如需了解详情,请参阅平台映射

如果问题仍然存在,请与我们联系寻求支持。

默认平台

项目所有者应定义明确的平台,以描述他们想要针对哪些架构构建应用。然后,使用 --platforms 触发这些事件。

如果未设置 --platforms,Bazel 会默认使用表示本地构建机器的 platform。此值会在 @local_config_platform//:host 中自动生成,因此无需明确定义。它会将本地机器的 OSCPU 映射到 @platforms 中声明的 constraint_value

select()

项目可以在 constraint_value 目标select(),但不能在完整平台上select()。这是有意为之,以便 select() 支持尽可能多的机器。包含 ARM 专用源代码的库应支持所有搭载 ARM 的机器,除非有理由更具体地指定支持的机器。

如需选择一个或多个 constraint_value,请使用以下语法:

config_setting(
    name = "is_arm",
    constraint_values = [
        "@platforms//cpu:arm",
    ],
)

这相当于传统上在 --cpu 上进行选择:

config_setting(
    name = "is_arm",
    values = {
        "cpu": "arm",
    },
)

如需了解详情,请点击此处

--cpu--crosstool_top 等上的 select 不理解 --platforms。将项目迁移到平台时,您必须将其转换为 constraint_values,或使用平台映射在迁移期间同时支持这两种样式。

转场效果

Starlark 转换会更改构建图的部分标志。如果您的项目使用会设置 --cpu--crossstool_top 或其他旧版标志的转换,则读取 --platforms 的规则将不会看到这些更改。

将项目迁移到平台时,您必须将 return { "//command_line_option:cpu": "arm" } 等更改转换为 return { "//command_line_option:platforms": "//:my_arm_platform" },或者在迁移过程中使用平台映射来支持这两种样式。

迁移规则集

如果您拥有规则集,并且想要支持平台,则需要满足以下条件:

  1. 让规则逻辑使用 toolchain API 解析 toolchain。请参阅 toolchain API (ctx.toolchains)。

  2. 可选:定义 --incompatible_enable_platforms_for_my_language 标志,以便在迁移测试期间,规则逻辑通过新 API 或旧标志(例如 --crosstool_top)交替解析工具链。

  3. 定义构成平台组件的相关属性。请参阅常见平台属性

  4. 定义标准工具链,并通过规则的注册说明向用户提供这些工具链(详情

  5. 确保 select()配置转换支持平台。这是最大的挑战。对于多语言项目,这尤其具有挑战性(如果所有语言都无法读取 --platforms,则项目可能会失败)。

如果您需要混合使用不支持平台的规则,则可能需要平台映射来弥补差距。

常见平台属性

常用的跨语言平台属性(如 OSCPU)应在 @platforms 中声明。这有助于实现共享、标准化和跨语言兼容性。

规则特有的属性应在规则的代码库中声明。这样,您就可以对规则负责的具体概念保持明确的所有权。

如果您的规则使用专用操作系统或 CPU,则应在规则的代码库中声明这些操作系统或 CPU,而不是在 @platforms 中声明。

平台映射

平台映射是一个临时 API,可让平台感知型逻辑与同一 build 中的旧版逻辑混合使用。这是一种粗暴的工具,仅用于解决因迁移时间范围不同而导致的不兼容问题。

平台映射是 platform() 与一组相应的旧版标志(或反过来)的映射。例如:

platforms:
  # Maps "--platforms=//platforms:ios" to "--cpu=ios_x86_64 --apple_platform_type=ios".
  //platforms:ios
    --cpu=ios_x86_64
    --apple_platform_type=ios

flags:
  # Maps "--cpu=ios_x86_64 --apple_platform_type=ios" to "--platforms=//platforms:ios".
  --cpu=ios_x86_64
  --apple_platform_type=ios
    //platforms:ios

  # Maps "--cpu=darwin_x86_64 --apple_platform_type=macos" to "//platform:macos".
  --cpu=darwin_x86_64
  --apple_platform_type=macos
    //platforms:macos

Bazel 使用此方式来保证所有设置(包括基于平台的设置和旧版设置)在整个构建过程中始终如一地应用,包括通过转换

默认情况下,Bazel 会从工作区根目录中的 platform_mappings 文件读取映射。您还可以设置 --platform_mappings=//:my_custom_mapping

如需了解详情,请参阅平台映射设计

API 审核

platform 是一系列 constraint_value 目标

platform(
    name = "myplatform",
    constraint_values = [
        "@platforms//os:linux",
        "@platforms//cpu:arm",
    ],
)

constraint_value 是机器属性。相同“类型”的值会归入一个共同的 constraint_setting 下:

constraint_setting(name = "os")
constraint_value(
    name = "linux",
    constraint_setting = ":os",
)
constraint_value(
    name = "mac",
    constraint_setting = ":os",
)

toolchainStarlark 规则。其属性声明了语言的工具(例如 compiler = "//mytoolchain:custom_gcc")。其提供程序会将此信息传递给需要使用这些工具进行构建的规则。

工具链会声明其可定位的计算机的 constraint_value (target_compatible_with = ["@platforms//os:linux"]),以及其工具可在其上运行的计算机的 constraint_value (exec_compatible_with = ["@platforms//os:mac"])。

构建 $ bazel build //:myproject --platforms=//:myplatform 时,Bazel 会自动选择可在构建机器上运行的工具链,并为 //:myplatform 构建二进制文件。这称为工具链解析。

您可以使用 register_toolchainsWORKSPACE 中注册这组可用工具链,也可以使用 --extra_toolchains 在命令行中注册。

如需了解详情,请点击此处

问题

如需常规支持以及有关迁移时间表的问题,请与 bazel-discuss 或相应规则的所有者联系。

如需讨论平台/工具链 API 的设计和演变,请与 bazel-dev 联系。

另请参阅