配置

报告问题 查看源代码 每夜 build · 7.4 . 7.3 · 7.2 · 7.1 · 7.0 · 6.5

本页面介绍 Starlark 配置(用于自定义项目构建方式的 Bazel 的 API)的优势和基本用法。其中包括如何定义 build 设置,并提供了示例。

这样一来,您就可以:

  • 为项目定义自定义标志,无需使用 --define
  • 编写转换,以便在与其父级(例如 --compilation_mode=opt--cpu=arm)不同的配置中配置依赖项
  • 将更好的默认值融入规则(例如,使用指定的 SDK 自动构建 //my:android_app

等等,全部来自 .bzl 文件(无需 Bazel 版本)。如需查看示例,请参阅 bazelbuild/examples 代码库。

用户定义的构建设置

build 设置是一条配置信息。可以将配置视为键值对映射。设置 --cpu=ppc--copt="-DFoo" 会生成如下所示的配置 {cpu: ppc, copt: "-DFoo"}。每个条目都是一项构建设置。

cpucopt 等传统标志是原生设置,它们的键在原生 bazel Java 代码中进行设置。Bazel 用户只能通过命令行和原生维护的其他 API 读取和写入这些文件。更改原生标志以及公开这些标志的 API 需要一个 Bazel 版本。用户定义的构建设置在 .bzl 文件中定义(因此不需要 bazel 版本来注册更改)。您还可以通过命令行设置这些值(如果它们被指定为 flags,请参阅下文),但也可以通过用户定义的转换进行设置。

定义 build 设置

端到端示例

build_setting rule() 参数

build 设置是与其他规则一样的规则,通过 Starlark rule() 函数的 build_setting 属性加以区分。

# example/buildsettings/build_settings.bzl
string_flag = rule(
    implementation = _impl,
    build_setting = config.string(flag = True)
)

build_setting 属性接受一个用于指定 build 设置类型的函数。该类型仅限于一组基本 Starlark 类型,例如 boolstring。如需了解详情,请参阅 config 模块文档。您可以在规则的实现函数中完成更复杂的输入。有关详情,请参见下文。

config 模块的函数接受可选的布尔值参数 flag,该参数默认设置为 false。如果 flag 设置为 true,则用户可以在命令行上以及规则写入者通过默认值和过渡在内部设置 build 设置。并非所有设置都应由用户设置。例如,作为规则编写者,如果您想在测试规则内启用某种调试模式,就不要让用户能够在其他非测试规则中随意启用该功能。

使用 ctx.build_setting_value

与所有规则一样,构建设置规则也有实现函数。您可以通过 ctx.build_setting_value 方法访问 build 设置的基本 Starlark 类型值。此方法仅适用于 build 设置规则的 ctx 对象。这些实现方法可以直接转发 build 设置值,也可以对其执行其他工作,例如类型检查或更复杂的结构体创建。下面展示了如何实现 enum 类型的 build 设置:

# example/buildsettings/build_settings.bzl
TemperatureProvider = provider(fields = ['type'])

temperatures = ["HOT", "LUKEWARM", "ICED"]

def _impl(ctx):
    raw_temperature = ctx.build_setting_value
    if raw_temperature not in temperatures:
        fail(str(ctx.label) + " build setting allowed to take values {"
             + ", ".join(temperatures) + "} but was set to unallowed value "
             + raw_temperature)
    return TemperatureProvider(type = raw_temperature)

temperature = rule(
    implementation = _impl,
    build_setting = config.string(flag = True)
)

定义多组字符串标志

字符串设置具有额外的 allow_multiple 参数,可让您在命令行或 bazelrc 中多次设置该标志。它们的默认值仍使用字符串类型的属性进行设置:

# example/buildsettings/build_settings.bzl
allow_multiple_flag = rule(
    implementation = _impl,
    build_setting = config.string(flag = True, allow_multiple = True)
)
# example/BUILD
load("//example/buildsettings:build_settings.bzl", "allow_multiple_flag")
allow_multiple_flag(
    name = "roasts",
    build_setting_default = "medium"
)

该标志的每个设置都被视为一个值:

$ bazel build //my/target --//example:roasts=blonde \
    --//example:roasts=medium,dark

上述代码会解析为 {"//example:roasts": ["blonde", "medium,dark"]}ctx.build_setting_value 会返回列表 ["blonde", "medium,dark"]

实例化 build 设置

使用 build_setting 参数定义的规则具有隐式必需的 build_setting_default 属性。此属性的类型与 build_setting 参数声明的类型相同。

# example/buildsettings/build_settings.bzl
FlavorProvider = provider(fields = ['type'])

def _impl(ctx):
    return FlavorProvider(type = ctx.build_setting_value)

flavor = rule(
    implementation = _impl,
    build_setting = config.string(flag = True)
)
# example/BUILD
load("//example/buildsettings:build_settings.bzl", "flavor")
flavor(
    name = "favorite_flavor",
    build_setting_default = "APPLE"
)

预定义设置

端到端示例

Skylib 库包含一组预定义设置,您可以将其实例化,而无需编写自定义 Starlark。

例如,如需定义接受一组有限字符串值的设置,请执行以下操作:

# example/BUILD
load("@bazel_skylib//rules:common_settings.bzl", "string_flag")
string_flag(
    name = "myflag",
    values = ["a", "b", "c"],
    build_setting_default = "a",
)

如需查看完整列表,请参阅常见的 build 设置规则

使用 build 设置

取决于 build 设置

如果目标想读取某个配置信息,则可以通过常规属性依赖项直接依赖于 build 设置。

# example/rules.bzl
load("//example/buildsettings:build_settings.bzl", "FlavorProvider")
def _rule_impl(ctx):
    if ctx.attr.flavor[FlavorProvider].type == "ORANGE":
        ...

drink_rule = rule(
    implementation = _rule_impl,
    attrs = {
        "flavor": attr.label()
    }
)
# example/BUILD
load("//example:rules.bzl", "drink_rule")
load("//example/buildsettings:build_settings.bzl", "flavor")
flavor(
    name = "favorite_flavor",
    build_setting_default = "APPLE"
)
drink_rule(
    name = "my_drink",
    flavor = ":favorite_flavor",
)

语言可能需要创建一组规范的 build 设置,该语言的所有规则都依赖于这些设置。虽然 fragments 的原生概念不再以硬编码对象的形式存在于 Starlark 配置世界中,但转换此概念的一种方法是使用一组常见的隐式属性。例如:

# kotlin/rules.bzl
_KOTLIN_CONFIG = {
    "_compiler": attr.label(default = "//kotlin/config:compiler-flag"),
    "_mode": attr.label(default = "//kotlin/config:mode-flag"),
    ...
}

...

kotlin_library = rule(
    implementation = _rule_impl,
    attrs = dicts.add({
        "library-attr": attr.string()
    }, _KOTLIN_CONFIG)
)

kotlin_binary = rule(
    implementation = _binary_impl,
    attrs = dicts.add({
        "binary-attr": attr.label()
    }, _KOTLIN_CONFIG)

在命令行中使用 build 设置

与大多数原生标志类似,您可以使用命令行来设置标记为标志的构建设置。build 设置的名称是其使用 name=value 语法的完整目标路径:

$ bazel build //my/target --//example:string_flag=some-value # allowed
$ bazel build //my/target --//example:string_flag some-value # not allowed

支持特殊的布尔值语法:

$ bazel build //my/target --//example:boolean_flag
$ bazel build //my/target --no//example:boolean_flag

使用 build 设置别名

您可以为 build 设置目标路径设置别名,以便在命令行上更轻松地读取。别名与原生标志的运作方式类似,也使用双短划线选项语法。

通过向 .bazelrc 添加 --flag_alias=ALIAS_NAME=TARGET_PATH 来设置别名。例如,如需将别名设置为 coffee,请执行以下操作:

# .bazelrc
build --flag_alias=coffee=//experimental/user/starlark_configurations/basic_build_setting:coffee-temp

最佳实践:多次设置别名会导致最近一个别名优先。请使用唯一的别名名称,以避免意外的解析结果。

如需使用别名,请输入别名,而不是输入 build 设置目标路径。 在用户的 .bazelrc 中设置上述 coffee 示例:

$ bazel build //my/target --coffee=ICED

来替代

$ bazel build //my/target --//experimental/user/starlark_configurations/basic_build_setting:coffee-temp=ICED

最佳实践:虽然可以在命令行中设置别名,但将它们放在 .bazelrc 中可以减少命令行的杂乱。

标签类型的 build 设置

端到端示例

与其他 build 设置不同,标签类型的设置无法使用 build_setting 规则参数进行定义。不过,Bazel 有两个内置规则:label_flaglabel_setting。这些规则会将设置了 build 设置的实际目标的提供程序转发给 build 系统。label_flaglabel_setting 可以通过转场读取/写入,并且用户可以像其他 build_setting 规则一样设置 label_flag。它们之间的唯一区别是无法自定义。

标签类型的设置最终将取代后期绑定默认设置的功能。后期绑定默认属性是标签类型的属性,其最终值可能会受配置影响。在 Starlark 中,这将取代 configuration_field API。

# example/rules.bzl
MyProvider = provider(fields = ["my_field"])

def _dep_impl(ctx):
    return MyProvider(my_field = "yeehaw")

dep_rule = rule(
    implementation = _dep_impl
)

def _parent_impl(ctx):
    if ctx.attr.my_field_provider[MyProvider].my_field == "cowabunga":
        ...

parent_rule = rule(
    implementation = _parent_impl,
    attrs = { "my_field_provider": attr.label() }
)

# example/BUILD
load("//example:rules.bzl", "dep_rule", "parent_rule")

dep_rule(name = "dep")

parent_rule(name = "parent", my_field_provider = ":my_field_provider")

label_flag(
    name = "my_field_provider",
    build_setting_default = ":dep"
)

build 设置和 select()

端到端示例

用户可以使用 select() 配置 build 设置的属性。构建设置目标可以传递给 config_settingflag_values 属性。与配置匹配的值会作为 String 传递,然后解析为 build 设置的类型,以便进行匹配。

config_setting(
    name = "my_config",
    flag_values = {
        "//example:favorite_flavor": "MANGO"
    }
)

用户定义的转场效果

配置转换用于在 build 图中将从一个已配置目标到另一个目标的转换进行映射。

定义

过渡定义了规则之间的配置更改。例如,“为与其父级不同的 CPU 编译我的依赖项”之类的请求由转换处理。

正式地说,转换是指从输入配置到一种或多种输出配置的函数。大多数转换都是 1:1 的,例如“使用 --cpu=ppc 替换输入配置”。也可以存在 1:2+ 转换,但具有特殊限制。

在 Starlark 中,过渡的定义与规则非常相似,具有一个定义的 transition() 函数和一个实现函数。

# example/transitions/transitions.bzl
def _impl(settings, attr):
    _ignore = (settings, attr)
    return {"//example:favorite_flavor" : "MINT"}

hot_chocolate_transition = transition(
    implementation = _impl,
    inputs = [],
    outputs = ["//example:favorite_flavor"]
)

transition() 函数会接受一个实现函数、一组要读取的 build 设置 (inputs) 和一组要写入的 build 设置 (outputs)。实现函数有两个参数,即 settingsattrsettingsinputs 参数中向 transition() 声明的所有设置的字典 {String:Object}。

attr 是转换所关联规则的属性和值的字典。作为传出边缘过渡附加时,这些属性的值都是配置的 select() 之后分辨率。作为传入边缘过渡附加时,attr 不包含任何使用选择器解析其值的属性。如果 --foo 上的传入边缘转场读取属性 bar,然后还选择在 --foo 上设置属性 bar,则传入边缘转场可能会在转场中读取错误的 bar 值。

实现函数必须返回一个要应用的新 build 设置值的字典(如果是具有多个输出配置的转换,则为字典列表)。返回的字典键集必须完全包含传递给转换函数的 outputs 参数的一组 build 设置。即使 build 设置在转换过程中实际上没有更改,也必须在返回的字典中明确传递其原始值。

定义 1:2 以上的转换

端到端示例

出站边缘转换可将单个输入配置映射到两个或更多输出配置。这对于定义用于捆绑多架构代码的规则非常有用。

1:2 以上的转场效果是通过在转场实现函数中返回字典列表来定义的。

# example/transitions/transitions.bzl
def _impl(settings, attr):
    _ignore = (settings, attr)
    return [
        {"//example:favorite_flavor" : "LATTE"},
        {"//example:favorite_flavor" : "MOCHA"},
    ]

coffee_transition = transition(
    implementation = _impl,
    inputs = [],
    outputs = ["//example:favorite_flavor"]
)

它们还可以设置规则实现函数可用于读取各个依赖项的自定义键:

# example/transitions/transitions.bzl
def _impl(settings, attr):
    _ignore = (settings, attr)
    return {
        "Apple deps": {"//command_line_option:cpu": "ppc"},
        "Linux deps": {"//command_line_option:cpu": "x86"},
    }

multi_arch_transition = transition(
    implementation = _impl,
    inputs = [],
    outputs = ["//command_line_option:cpu"]
)

附加转场

端到端示例

转场效果可附加在两个位置:入边和出边。 这实际上意味着规则可以转换自己的配置(入边过渡)和转换其依赖项的配置(出边过渡)。

注意:目前无法将 Starlark 转换附加到原生规则。 如果您需要这样做,请与 bazel-discuss@googlegroups.com 联系,寻求帮助来找出权宜解决方法。

传入的边缘转换

通过将 transition 对象(由 transition() 创建)附加到 rule()cfg 参数来激活传入边缘转场效果:

# example/rules.bzl
load("example/transitions:transitions.bzl", "hot_chocolate_transition")
drink_rule = rule(
    implementation = _impl,
    cfg = hot_chocolate_transition,
    ...

传入边缘转场效果必须为 1:1 转场效果。

传出边缘转换

通过将 transition 对象(由 transition() 创建)附加到属性的 cfg 参数来激活出站边缘转场效果:

# example/rules.bzl
load("example/transitions:transitions.bzl", "coffee_transition")
drink_rule = rule(
    implementation = _impl,
    attrs = { "dep": attr.label(cfg = coffee_transition)}
    ...

出站边缘转场效果可以是 1:1 或 1:2 或更大。

如需了解如何读取这些键,请参阅使用转场效果访问属性

原生选项的转换

端到端示例

Starlark 转换还可以通过为选项名称添加特殊前缀来声明对原生 build 配置选项的读写操作。

# example/transitions/transitions.bzl
def _impl(settings, attr):
    _ignore = (settings, attr)
    return {"//command_line_option:cpu": "k8"}

cpu_transition = transition(
    implementation = _impl,
    inputs = [],
    outputs = ["//command_line_option:cpu"]

不受支持的原生选项

Bazel 不支持使用 "//command_line_option:define"--define 上进行转换。请改用自定义构建设置。一般来说,不建议使用新的 --define 用法,而应改用 build 设置。

Bazel 不支持在 --config 上进行转换。这是因为 --config 是一个会扩展为其他标志的“扩展”标志。

重要的是,--config 可能包含不影响 build 配置的标志,例如 --spawn_strategy。根据设计,Bazel 无法将此类标志绑定到单个目标。这意味着,无法以一致的方式在转场中应用它们。

作为一种权宜解决方法,您可以在转换中明确列出配置中的标志。这就需要在两个位置维护 --config 的展开,这是已知的界面缺陷。

允许在转场效果中使用多个 build 设置

设置允许多个值的 build 设置时,必须使用列表设置该设置的值。

# example/buildsettings/build_settings.bzl
string_flag = rule(
    implementation = _impl,
    build_setting = config.string(flag = True, allow_multiple = True)
)
# example/BUILD
load("//example/buildsettings:build_settings.bzl", "string_flag")
string_flag(name = "roasts", build_setting_default = "medium")
# example/transitions/rules.bzl
def _transition_impl(settings, attr):
    # Using a value of just "dark" here will throw an error
    return {"//example:roasts" : ["dark"]},

coffee_transition = transition(
    implementation = _transition_impl,
    inputs = [],
    outputs = ["//example:roasts"]
)

无操作过渡

如果转场返回 {}[]None,则表示将所有设置保持原有值。这比将每个输出显式设置为自身更方便。

# example/transitions/transitions.bzl
def _impl(settings, attr):
    _ignore = (attr)
    if settings["//example:already_chosen"] is True:
      return {}
    return {
      "//example:favorite_flavor": "dark chocolate",
      "//example:include_marshmallows": "yes",
      "//example:desired_temperature": "38C",
    }

hot_chocolate_transition = transition(
    implementation = _impl,
    inputs = ["//example:already_chosen"],
    outputs = [
        "//example:favorite_flavor",
        "//example:include_marshmallows",
        "//example:desired_temperature",
    ]
)

使用转场效果访问属性

端到端示例

将转场效果附加到出边(无论转场效果是 1:1 还是 1:2+ 转场效果)时,如果 ctx.attr 不是列表,则会被强制转换为列表。此列表中元素的顺序未指定。

# example/transitions/rules.bzl
def _transition_impl(settings, attr):
    return {"//example:favorite_flavor" : "LATTE"},

coffee_transition = transition(
    implementation = _transition_impl,
    inputs = [],
    outputs = ["//example:favorite_flavor"]
)

def _rule_impl(ctx):
    # Note: List access even though "dep" is not declared as list
    transitioned_dep = ctx.attr.dep[0]

    # Note: Access doesn't change, other_deps was already a list
    for other_dep in ctx.attr.other_deps:
      # ...


coffee_rule = rule(
    implementation = _rule_impl,
    attrs = {
        "dep": attr.label(cfg = coffee_transition)
        "other_deps": attr.label_list(cfg = coffee_transition)
    })

如果转换状态是 1:2+ 并设置了自定义键,则 ctx.split_attr 可用于读取每个键的各个依赖项:

# example/transitions/rules.bzl
def _impl(settings, attr):
    _ignore = (settings, attr)
    return {
        "Apple deps": {"//command_line_option:cpu": "ppc"},
        "Linux deps": {"//command_line_option:cpu": "x86"},
    }

multi_arch_transition = transition(
    implementation = _impl,
    inputs = [],
    outputs = ["//command_line_option:cpu"]
)

def _rule_impl(ctx):
    apple_dep = ctx.split_attr.dep["Apple deps"]
    linux_dep = ctx.split_attr.dep["Linux deps"]
    # ctx.attr has a list of all deps for all keys. Order is not guaranteed.
    all_deps = ctx.attr.dep

multi_arch_rule = rule(
    implementation = _rule_impl,
    attrs = {
        "dep": attr.label(cfg = multi_arch_transition)
    })

如需查看完整示例,请点击此处。

与平台和工具链集成

目前,许多原生标志(例如 --cpu--crosstool_top)都与工具链解析相关。未来,对这类标志的显式转换可能会被替换为在目标平台上进行转换。

内存和性能注意事项

向 build 中添加转换(即新配置)需要付出代价:build 图更大、更难理解,并且 build 速度更慢。在考虑在 build 规则中使用转换时,不妨考虑这些成本。以下示例展示了转换可能如何使 build 图呈指数增长。

行为异常的 build:一个案例

可伸缩性图表

图 1. 显示顶级目标及其依赖项的可伸缩性图。

此图表显示了一个顶级目标 //pkg:app,该目标取决于两个目标://pkg:1_0//pkg:1_1。这两个目标都依赖于 //pkg:2_0//pkg:2_1 这两个目标。这两个目标都依赖于两个目标://pkg:3_0//pkg:3_1。此过程会一直持续到 //pkg:n_0//pkg:n_1,这两个依赖项都依赖于单个目标 //pkg:dep

构建 //pkg:app 需要 \(2n+2\) 目标:

  • //pkg:app
  • //pkg:dep
  • //pkg:i_0//pkg:i_1: \(i\) 在 \([1..n]\)内

假设您实现了标志 --//foo:owner=<STRING>,并且 //pkg:i_b 应用了

depConfig = myConfig + depConfig.owner="$(myConfig.owner)$(b)"

换句话说,//pkg:i_b 会将 b 附加到其所有依赖项的 --owner 旧值。

这会生成以下已配置的目标

//pkg:app                              //foo:owner=""
//pkg:1_0                              //foo:owner=""
//pkg:1_1                              //foo:owner=""
//pkg:2_0 (via //pkg:1_0)              //foo:owner="0"
//pkg:2_0 (via //pkg:1_1)              //foo:owner="1"
//pkg:2_1 (via //pkg:1_0)              //foo:owner="0"
//pkg:2_1 (via //pkg:1_1)              //foo:owner="1"
//pkg:3_0 (via //pkg:1_0 → //pkg:2_0)  //foo:owner="00"
//pkg:3_0 (via //pkg:1_0 → //pkg:2_1)  //foo:owner="01"
//pkg:3_0 (via //pkg:1_1 → //pkg:2_0)  //foo:owner="10"
//pkg:3_0 (via //pkg:1_1 → //pkg:2_1)  //foo:owner="11"
...

//pkg:dep 生成 \(2^n\) 已配置的目标:config.owner=针对 \(b_i\) \(\{0,1\}\)中的所有项“\(b_0b_1...b_n\)”。

这会使构建图比目标图大,产生相应的内存和性能影响。

TODO:添加用于衡量和缓解这些问题的策略。

深入阅读

如需详细了解如何修改 build 配置,请参阅: