リモート実行のためのリモートキャッシュヒットのデバッグ

問題を報告ソースを表示 Nightly · 7.4 . 7.3 · 7.2 · 7.1 · 7.0 · 6.5

このページでは、キャッシュヒット率を確認する方法と、リモート実行のコンテキストでキャッシュミスを調査する方法について説明します。

このページでは、リモート実行を正常に利用しているビルドまたはテストがあり、リモートキャッシュを効果的に利用していることを確認することを前提としています。

キャッシュヒット率を確認する

Bazel 実行の標準出力で、プロセスを一覧表示する INFO 行を確認します。これは、おおまかに Bazel アクションに対応しています。この行には、アクションが実行された場所の詳細が示されます。リモートで実行されたアクションを示す remote ラベル、ローカルサンドボックスで実行されたアクションを示す linux-sandbox、その他の実行戦略を示すその他の値を探します。リモートキャッシュから結果が返されたアクションは remote cache hit と表示されます。

例:

INFO: 11 processes: 6 remote cache hit, 3 internal, 2 remote.

この例では、リモートキャッシュヒットが 6 回あり、2 つのアクションはキャッシュヒットがなく、リモートで実行されました。3 つの内部部分は無視できます。通常は、シンボリックリンクの作成などの小さな内部アクションです。この概要にはローカルキャッシュヒットは含まれません。プロセスが 0（または想定よりも小さい）の場合は、bazel clean を実行してから、ビルド/テストコマンドを実行します。

キャッシュヒットのトラブルシューティング

期待するキャッシュヒット率が得られない場合は、次の操作を行います。

同じビルド/テストコマンドを再実行してもキャッシュヒットが発生することを確認する

キャッシュに入力する予定のビルドやテストを実行します。特定のスタックで新しいビルドを初めて実行するときは、リモートキャッシュヒットが発生しないことが予想されます。リモート実行の一環として、アクションの結果はキャッシュに保存され、その後の実行で結果が取得されます。
bazel clean を実行します。このコマンドを実行すると、ローカルキャッシュが消去されます。これにより、ローカルキャッシュヒットによって結果がマスクされることなく、リモートキャッシュヒットを調査できます。
調査しているビルドとテストを（同じマシンで）再度実行します。
INFO 行でキャッシュヒット率を確認します。remote cache hit と internal 以外のプロセスが表示されない場合は、キャッシュへのデータ入力とアクセスが正しく行われています。その場合は、次のセクションに進みます。
不一致の原因として考えられるのは、ビルド内の非気密性により、2 回の実行でアクションが異なるアクションキーを受け取ることです。これらのアクションを確認する手順は次のとおりです。

a. 問題のビルドまたはテストを再実行して実行ログを取得します。
```
  bazel clean
  bazel --optional-flags build //your:target --execution_log_binary_file=/tmp/exec1.log
```
b. 2 つの実行間で実行ログを比較します。2 つのログファイルでアクションが同じであることを確認します。差異は、実行間で発生した変更に関する手がかりとなります。これらの不一致を解消するようにビルドを更新します。

キャッシュの問題を解決し、繰り返し実行ですべてのキャッシュヒットが発生する場合は、次のセクションに進みます。

アクション ID が同じなのにキャッシュヒットがない場合は、構成の何らかの原因でキャッシュが保存されていない可能性があります。このセクションに進んで、一般的な問題を確認します。

実行ログの差分を比較する必要がない場合は、代わりに人間が判読できる --execution_log_json_file フラグを使用できます。実行時間が含まれ、順序を保証しないため、安定した差分の取得には使用できません。
実行ログのすべてのアクションで cacheable が true に設定されていることを確認します。特定のアクションの実行ログに cacheable が表示されない場合は、対応するルールの BUILD ファイルの定義に no-cache タグが含まれている可能性があります。アクションの実行元を特定するには、実行ログの人が読める形式の progress_message フィールドを調べます。
アクションが同じで cacheable なのにキャッシュヒットがない場合は、ビルドのキャッシュ検索を無効にする --noremote_accept_cached がコマンドラインに含まれている可能性があります。

実際のコマンドラインを把握するのが難しい場合は、Build Event Protocol の正規のコマンドラインを使用します。

a. ログのテキストバージョンを取得するには、--build_event_text_file=/tmp/bep.txtを Bazel コマンドに追加します。

b. ログのテキストバージョンを開き、command_line_label: "canonical" を含む structured_command_line メッセージを検索します。展開すると、すべてのオプションが一覧表示されます。

c. remote_accept_cached を検索して、false に設定されているかどうかを確認します。

d. remote_accept_cached が false の場合は、コマンドラインまたは bazelrc ファイルのどちらで false に設定されているかを確認します。

マシン間でのキャッシュ保存を確認する

同じマシンでキャッシュヒットが期待どおりに発生したら、別のマシンで同じビルドまたはテストを実行します。マシン間でキャッシュに保存されていないと思われる場合は、次の操作を行います。

既存のキャッシュにヒットしないように、ビルドに小さな変更を加えます。

最初のマシンでビルドを実行します。

 bazel clean
 bazel ... build ... --execution_log_binary_file=/tmp/exec1.log

2 番目のマシンでビルドを実行し、ステップ 1 の変更が含まれていることを確認します。
```
 bazel clean
 bazel ... build ... --execution_log_binary_file=/tmp/exec2.log
```
2 つの実行の実行ログを比較します。ログが同じでない場合は、ビルド構成に不一致がないか、ホスト環境のプロパティがどちらかのビルドに漏れていないかを確認します。

実行ログの比較

実行ログには、ビルド中に実行されたすべてのアクションの記録が含まれます。各アクションには、アクションキーのすべての情報が含まれる SpawnExec 要素があります。したがって、ログが同じであれば、アクションキャッシュキーも同じです。

想定どおりにキャッシュヒットを共有していない 2 つのビルドのログを比較する手順は次のとおりです。

各ビルドから実行ログを取得し、/tmp/exec1.log と /tmp/exec2.log として保存します。
次のコマンドを使用して Bazel ソースコードをダウンロードし、Bazel フォルダに移動します。execlog パーサーで実行ログを解析するにはソースコードが必要です。
```
git clone https://github.com/bazelbuild/bazel.git
cd bazel
```
実行ログパーサーを使用して、ログをテキストに変換します。次の呼び出しでは、比較を容易にするために、2 番目のログ内のアクションを 1 番目のログ内のアクション順序と一致するように並べ替えます。
```
bazel build src/tools/execlog:parser
bazel-bin/src/tools/execlog/parser \
  --log_path=/tmp/exec1.log \
  --log_path=/tmp/exec2.log \
  --output_path=/tmp/exec1.log.txt \
  --output_path=/tmp/exec2.log.txt
```
任意のテキスト差分を使用して、/tmp/exec1.log.txt と /tmp/exec2.log.txt を比較します。

リモート実行のためのリモート キャッシュ ヒットのデバッグ

キャッシュ ヒット率を確認する