Consulta del gráfico de acción (aquery)

Denuncia un problema Ver fuente Nightly · 7.4 . 7.3 · 7.2 · 7.1 · 7.0 · 6.5

El comando aquery te permite consultar acciones en tu gráfico de compilación. Opera en el gráfico de destino configurado después del análisis y expone información sobre las acciones, los artefactos y sus relaciones.

aquery es útil cuando te interesan las propiedades de las acciones o artefactos generados a partir del gráfico de destino configurado. Por ejemplo, los comandos reales que se ejecutan y sus entradas, salidas y mnemotecnias.

La herramienta acepta varias opciones de la línea de comandos. En particular, el comando aquery se ejecuta sobre una compilación normal de Bazel y hereda el conjunto de opciones disponibles durante una compilación.

Admite el mismo conjunto de funciones que también está disponible para query tradicional, pero siblings, buildfiles y tests.

Este es un ejemplo de resultado de aquery (sin detalles específicos):

$ bazel aquery 'deps(//some:label)'
action 'Writing file some_file_name'
  Mnemonic: ...
  Target: ...
  Configuration: ...
  ActionKey: ...
  Inputs: [...]
  Outputs: [...]

Sintaxis básica

Un ejemplo simple de la sintaxis de aquery es el siguiente:

bazel aquery "aquery_function(function(//target))"

La expresión de consulta (entre comillas) consta de lo siguiente:

• aquery_function(...): Funciones específicas de aquery. Obtén más detalles más abajo.
• function(...): Las funciones estándar como query tradicionales.
• //target es la etiqueta del objetivo de interés.

# aquery examples:
# Get the action graph generated while building //src/target_a
$ bazel aquery '//src/target_a'

# Get the action graph generated while building all dependencies of //src/target_a
$ bazel aquery 'deps(//src/target_a)'

# Get the action graph generated while building all dependencies of //src/target_a
# whose inputs filenames match the regex ".*cpp".
$ bazel aquery 'inputs(".*cpp", deps(//src/target_a))'

Usa funciones de aquery

Existen tres funciones aquery:

• inputs: Filtra acciones por entradas.
• outputs: Filtra las acciones por resultados.
• mnemonic: filtra acciones por nombre nemotécnico.

expr ::= inputs(word, expr)

El operador inputs muestra las acciones generadas a partir de la compilación de expr, cuyos nombres de archivo de entrada coinciden con la regex que proporciona word.

$ bazel aquery 'inputs(".*cpp", deps(//src/target_a))'

Las funciones outputs y mnemonic comparten una sintaxis similar.

También puedes combinar funciones para lograr la operación Y. Por ejemplo:

  $ bazel aquery 'mnemonic("Cpp.*", (inputs(".*cpp", inputs("foo.*", //src/target_a))))'

El comando anterior encontraría todas las acciones involucradas en la compilación de //src/target_a, cuyos mnemónicos coinciden con "Cpp.*" y las entradas coinciden con los patrones ".*cpp" y "foo.*".

Importante: Las funciones de aquery no se pueden anidar dentro de funciones que no sean de aquery. En teoría, esto tiene sentido, ya que el resultado de las funciones de consulta es Acciones, no objetivos configurados.

Ejemplo del error de sintaxis producido:

        $ bazel aquery 'deps(inputs(".*cpp", //src/target_a))'
        ERROR: aquery filter functions (inputs, outputs, mnemonic) produce actions,
        and therefore can't be the input of other function types: deps
        deps(inputs(".*cpp", //src/target_a))

Opciones

Opciones de compilación

aquery se ejecuta sobre una compilación normal de Bazel y, por lo tanto, hereda el conjunto de opciones disponibles durante una compilación.

Opciones de Aquery

--output=(text|summary|proto|jsonproto|textproto), default=text

El formato de salida predeterminado (text) es legible por humanos. Usa proto, textproto o jsonproto para el formato legible por máquinas. El mensaje de proto es analysis.ActionGraphContainer.

--include_commandline, default=true

Incluye el contenido de las líneas de comandos de acción en el resultado (potencialmente grande).

--include_artifacts, default=true

Incluye los nombres de las entradas y salidas de la acción en el resultado (potencialmente grande).

--include_aspects, default=true

Indica si se deben incluir en el resultado las acciones generadas por Aspect.

--include_param_files, default=false

Incluye el contenido de los archivos de parámetros que se usan en el comando (potencialmente grande).

Advertencia: Si habilitas esta marca, se habilitará automáticamente la marca --include_commandline.

--include_file_write_contents, default=false

Incluye el contenido de archivos para la acción actions.write() y el contenido del archivo de manifiesto para la acción SourceSymlinkManifest. El contenido del archivo se muestra en el campo file_contents con --output=xxxproto. Con --output=text, el resultado tiene la línea FileWriteContents: [<base64-encoded file contents>].

--skyframe_state, default=false

Sin realizar un análisis adicional, volcar el gráfico de acciones de Skyframe

Nota: Actualmente, no se admite especificar un objetivo con --skyframe_state. Esta marca solo está disponible con --output=proto o --output=textproto.

Otras herramientas y funciones

Cómo consultar el estado de Skyframe

Skyframe es el modelo de evaluación y de incrementalidad de Bazel. En cada instancia del servidor de Bazel, Skyframe almacena el gráfico de dependencia construido a partir de las ejecuciones anteriores de la fase de análisis.

En algunos casos, es útil consultar el grafo de acciones en Skyframe. Un ejemplo de caso de uso sería el siguiente:

1. Ejecuta bazel build //target_a
2. Ejecuta bazel build //target_b
3. Se generó el archivo foo.out.

Como usuario de Bazel, quiero determinar si foo.out se generó a partir de la compilación de //target_a o //target_b.

Se podría ejecutar bazel aquery 'outputs("foo.out", //target_a)' y bazel aquery 'outputs("foo.out", //target_b)' para determinar la acción responsable de crear foo.out y, a su vez, el objetivo. Sin embargo, la cantidad de objetivos diferentes compilados anteriormente puede ser mayor que 2, lo que hace que ejecutar varios comandos aquery sea un inconveniente.

Como alternativa, se puede usar la marca --skyframe_state:

  # List all actions on Skyframe's action graph
  $ bazel aquery --output=proto --skyframe_state

  # or

  # List all actions on Skyframe's action graph, whose output matches "foo.out"
  $ bazel aquery --output=proto --skyframe_state 'outputs("foo.out")'

Con el modo --skyframe_state, aquery toma el contenido del grafo de acciones que Skyframe mantiene en la instancia de Bazel, (de manera opcional) realiza un filtrado en él y genera el contenido, sin volver a ejecutar la fase de análisis.

Consideraciones especiales

Formato de salida

Por el momento, --skyframe_state solo está disponible para --output=proto y --output=textproto.

No se incluyen etiquetas de segmentación en la expresión de consulta.

Actualmente, --skyframe_state consulta todo el gráfico de acciones que existe en Skyframe, independientemente de los objetivos. Tener la etiqueta de destino especificada en la consulta junto con --skyframe_state se considera un error de sintaxis:

  # WRONG: Target Included
  $ bazel aquery --output=proto --skyframe_state **//target_a**
  ERROR: Error while parsing '//target_a)': Specifying build target(s) [//target_a] with --skyframe_state is currently not supported.

  # WRONG: Target Included
  $ bazel aquery --output=proto --skyframe_state 'inputs(".*.java", **//target_a**)'
  ERROR: Error while parsing '//target_a)': Specifying build target(s) [//target_a] with --skyframe_state is currently not supported.

  # CORRECT: Without Target
  $ bazel aquery --output=proto --skyframe_state
  $ bazel aquery --output=proto --skyframe_state 'inputs(".*.java")'

Comparación de los resultados de aquery

Puedes comparar los resultados de dos invocaciones de aquery diferentes con la herramienta aquery_differ. Por ejemplo, cuando realizas algunos cambios en la definición de tu regla y quieres verificar que las líneas de comandos en ejecución no hayan cambiado. aquery_differ es la herramienta para eso.

La herramienta está disponible en el repositorio bazelbuild/bazel. Para usarlo, clona el repositorio en tu máquina local. Ejemplo de uso:

  $ bazel run //tools/aquery_differ -- \
  --before=/path/to/before.proto \
  --after=/path/to/after.proto \
  --input_type=proto \
  --attrs=cmdline \
  --attrs=inputs

El comando anterior muestra la diferencia entre los resultados de aquery before y after: qué acciones estuvieron presentes en una, pero no en la otra, qué acciones tienen diferentes líneas de comandos o entradas en cada resultado de aquery, etcétera. El resultado de ejecutar el comando anterior sería el siguiente:

  Aquery output 'after' change contains an action that generates the following outputs that aquery output 'before' change doesn't:
  ...
  /list of output files/
  ...

  [cmdline]
  Difference in the action that generates the following output(s):
    /path/to/abc.out
  --- /path/to/before.proto
  +++ /path/to/after.proto
  @@ -1,3 +1,3 @@
    ...
    /cmdline diff, in unified diff format/
    ...

Opciones de comando

--before, --after: Son los archivos de salida de aquery que se compararán.

--input_type=(proto|text_proto), default=proto: Es el formato de los archivos de entrada. Se proporciona compatibilidad con el resultado de aquery proto y textproto.

--attrs=(cmdline|inputs), default=cmdline: Son los atributos de las acciones que se compararán.

Aspecto sobre aspecto

Es posible que los aspectos se apliquen uno encima del otro. El resultado de aquery de la acción generada por estos aspectos incluiría la ruta de acceso de aspectos, que es la secuencia de aspectos aplicados al objetivo que generó la acción.

Ejemplo de aspecto sobre aspecto:

  t0
  ^
  | <- a1
  t1
  ^
  | <- a2
  t2

Supongamos que t_i es un objetivo de la regla r_i, que aplica un aspecto a_i a sus dependencias.

Supongamos que a2 genera una acción X cuando se aplica al objetivo t0. El resultado de texto de bazel aquery --include_aspects 'deps(//t2)' para la acción X sería el siguiente:

  action ...
  Mnemonic: ...
  Target: //my_pkg:t0
  Configuration: ...
  AspectDescriptors: [//my_pkg:rule.bzl%**a2**(foo=...)
    -> //my_pkg:rule.bzl%**a1**(bar=...)]
  ...

Esto significa que la acción X fue generada por el aspecto a2 aplicado a a1(t0), donde a1(t0) es el resultado del aspecto a1 aplicado al objetivo t0.

Cada AspectDescriptor tiene el siguiente formato:

  AspectClass([param=value,...])

AspectClass puede ser el nombre de la clase de aspecto (para aspectos nativos) o bzl_file%aspect_name (para aspectos de Starlark). AspectDescriptor se ordenan en orden topológico del gráfico de dependencias.

Vinculación con el perfil JSON

Si bien aquery proporciona información sobre las acciones que se ejecutan en una compilación (por qué se ejecutan, sus entradas y salidas), el perfil JSON nos indica el tiempo y la duración de su ejecución. Es posible combinar estos 2 conjuntos de información a través de un denominador común: el resultado principal de una acción.

Para incluir los resultados de las acciones en el perfil JSON, genera el perfil con --experimental_include_primary_output --noslim_profile. Los perfiles delgados no son compatibles con la inclusión de salidas principales. Una consulta incluye de forma predeterminada el resultado principal de una acción.

Actualmente, no proporcionamos una herramienta canónica para combinar estas 2 fuentes de datos, pero deberías poder compilar tu propia secuencia de comandos con la información anterior.

Problemas conocidos

Cómo controlar las acciones compartidas

A veces, las acciones se comparten entre los destinos configurados.

En la fase de ejecución, esas acciones compartidas se consideran una sola y solo se ejecutan una vez. Sin embargo, aquery opera en el grafo de acciones previas a la ejecución y posteriores al análisis y, por lo tanto, las trata como acciones independientes cuyos artefactos de salida tienen el mismo execPath. Como resultado, los artefactos equivalentes aparecen duplicados.

Puedes encontrar la lista de problemas o funciones planificadas de aquery en GitHub.

Preguntas frecuentes

ActionKey sigue siendo el mismo, aunque cambie el contenido de un archivo de entrada.

En el contexto de una consulta, ActionKey hace referencia al String que se obtiene de ActionAnalysisMetadata#getKey:

  Returns a string encoding all of the significant behaviour of this Action that might affect the
  output. The general contract of `getKey` is this: if the work to be performed by the
  execution of this action changes, the key must change.

  ...

  Examples of changes that should affect the key are:

  - Changes to the BUILD file that materially affect the rule which gave rise to this Action.
  - Changes to the command-line options, environment, or other global configuration resources
      which affect the behaviour of this kind of Action (other than changes to the names of the
      input/output files, which are handled externally).
  - An upgrade to the build tools which changes the program logic of this kind of Action
      (typically this is achieved by incorporating a UUID into the key, which is changed each
      time the program logic of this action changes).
  Note the following exception: for actions that discover inputs, the key must change if any
  input names change or else action validation may falsely validate.

Esto excluye los cambios en el contenido de los archivos de entrada y no debe confundirse con RemoteCacheClient#ActionKey.

Actualizaciones

Si tienes algún problema o solicitud de función, infórmalo aquí.