Spesifikasi lengkap lingkungan eksekusi uji.
Latar belakang
Bahasa Bazel BUILD menyertakan aturan yang dapat digunakan untuk menentukan program pengujian otomatis dalam banyak bahasa.
Pengujian dijalankan menggunakan bazel test
.
Pengguna juga dapat menjalankan biner pengujian secara langsung. Hal ini diizinkan, tetapi tidak didukung, karena pemanggilan seperti itu tidak akan mematuhi mandat yang dijelaskan di bawah.
Pengujian harus bersifat hermetic: artinya, pengujian hanya boleh mengakses resource yang dependensinya telah dideklarasikan. Jika pengujian tidak hermetis dengan benar, pengujian tersebut tidak akan memberikan hasil yang dapat direproduksi secara historis. Hal ini bisa menjadi masalah yang signifikan untuk penemuan penyebabnya (menentukan perubahan mana yang merusak pengujian), kemampuan audit engineering rilis, dan isolasi resource pengujian (framework pengujian otomatis tidak boleh melakukan DDOS server karena beberapa pengujian kebetulan berbicara dengannya).
Tujuan
Tujuan halaman ini adalah untuk secara resmi menetapkan lingkungan runtime dan perilaku yang diharapkan dari pengujian Bazel. Tindakan ini juga akan memberlakukan persyaratan pada runner pengujian dan sistem build.
Spesifikasi lingkungan pengujian membantu penulis pengujian menghindari ketergantungan pada perilaku yang tidak ditentukan, sehingga memberikan lebih banyak kebebasan pada infrastruktur pengujian untuk melakukan perubahan implementasi. Spesifikasi memperketat beberapa lubang yang saat ini memungkinkan banyak pengujian untuk lulus meskipun tidak hermetis, deterministik, dan reentrant dengan benar.
Halaman ini dimaksudkan agar bersifat normatif dan otoritatif. Jika spesifikasi ini dan perilaku yang diimplementasikan dari test runner tidak setuju, spesifikasi akan lebih diutamakan.
Spesifikasi yang Diusulkan
Kata kunci "MUST", "MUST NOT", "REQUIRED", "SHALL", "SHALL NOT", "SEHARINYA", "SEHARINYA", "DIREKOMENDASIKAN", "MAY", dan "OPTIONAL" akan ditafsirkan seperti yang dijelaskan dalam IETF RFC 2119.
Tujuan pengujian
Tujuan pengujian Bazel adalah untuk mengonfirmasi beberapa properti file sumber yang diperiksa ke dalam repositori. (Di halaman ini, "file sumber" mencakup data pengujian, output emas, dan hal lain yang disimpan di bawah kontrol versi.) Satu pengguna menulis pengujian untuk menyatakan invarian yang diharapkan akan dipertahankan. Pengguna lain menjalankan pengujian nanti untuk memeriksa apakah invarian telah rusak. Jika pengujian bergantung pada variabel selain file sumber (non-hermetic), nilainya akan berkurang karena pengguna berikutnya tidak dapat memastikan bahwa perubahan mereka salah saat pengujian berhenti lulus.
Oleh karena itu, hasil pengujian hanya boleh bergantung pada:
- file sumber tempat pengujian memiliki dependensi yang dideklarasikan
- produk dari sistem build tempat pengujian memiliki dependensi yang dideklarasikan
- resource yang perilakunya dijamin oleh runner pengujian agar tetap konstan
Saat ini, perilaku tersebut tidak diterapkan. Namun, runner pengujian berhak menambahkan penerapan tersebut di masa mendatang.
Peran sistem build
Aturan pengujian serupa dengan aturan biner yang masing-masing harus menghasilkan program yang dapat dieksekusi. Untuk beberapa bahasa, ini adalah program stub yang menggabungkan manfaat spesifik bahasa dengan kode pengujian. Aturan pengujian juga harus menghasilkan output lainnya. Selain file pengujian utama yang dapat dieksekusi, runner pengujian akan memerlukan manifes runfiles, file input yang harus disediakan untuk pengujian pada runtime, dan mungkin memerlukan informasi tentang jenis, ukuran, dan tag pengujian.
Sistem build dapat menggunakan runfile untuk mengirimkan kode serta data. (Hal ini dapat digunakan sebagai pengoptimalan untuk membuat setiap biner pengujian lebih kecil dengan membagikan file di seluruh pengujian, misalnya melalui penggunaan penautan dinamis.) Sistem build harus memastikan bahwa file yang dapat dieksekusi yang dihasilkan memuat file ini melalui image runfile yang disediakan oleh runner pengujian, bukan referensi hardcode ke lokasi absolut di hierarki sumber atau output.
Peran runner pengujian
Dari sudut pandang runner pengujian, setiap pengujian adalah program yang dapat
dipanggil dengan execve()
. Mungkin ada cara lain untuk menjalankan pengujian; misalnya,
IDE mungkin mengizinkan eksekusi pengujian Java dalam proses. Namun, hasil
menjalankan pengujian sebagai proses mandiri harus dianggap otoritatif. Jika
proses pengujian berjalan hingga selesai dan berakhir secara normal dengan kode keluar
nol, berarti pengujian telah lulus. Hasil lainnya dianggap sebagai kegagalan uji. Secara
khusus, menulis salah satu string PASS
atau FAIL
ke stdout tidak
bermanfaat bagi runner pengujian.
Jika pengujian memerlukan waktu terlalu lama untuk dijalankan, melebihi batas resource tertentu, atau runner pengujian mendeteksi perilaku yang dilarang, pengujian dapat memilih untuk menghentikan pengujian dan memperlakukan pengujian sebagai kegagalan. Runner tidak boleh melaporkan bahwa pengujian berhasil setelah mengirim sinyal ke proses pengujian atau turunannya.
Seluruh target pengujian (bukan metode atau pengujian individual) diberi waktu
terbatas untuk dijalankan hingga selesai. Batas waktu untuk pengujian didasarkan pada
atribut timeout
sesuai
dengan tabel berikut:
timeout | Batas Waktu (dtk) |
---|---|
short | 60 |
longgar | 300 |
long | 900 |
abadi | 3600 |
Pengujian yang tidak menetapkan waktu tunggu secara eksplisit akan memiliki satu waktu tunggu tersirat berdasarkan
size
pengujian sebagai berikut:
ukuran | Label waktu tunggu tersirat |
---|---|
small | short |
medium | longgar |
large | long |
sangat besar | abadi |
Pengujian "besar" tanpa setelan waktu tunggu eksplisit akan dialokasikan 900 detik untuk dijalankan. Pengujian "sedang" dengan waktu tunggu "pendek" akan dialokasikan 60 detik.
Tidak seperti timeout
, size
juga menentukan asumsi penggunaan puncak
resource lain (seperti RAM) saat menjalankan pengujian secara lokal, seperti yang dijelaskan dalam
Definisi umum.
Semua kombinasi label size
dan timeout
sah, sehingga pengujian "sangat besar"
dapat dideklarasikan memiliki waktu tunggu "singkat". Kurasa komputer itu akan melakukan
hal-hal buruk dengan sangat cepat.
Pengujian dapat ditampilkan dengan cepat secara bebas, terlepas dari waktu tunggunya. Pengujian tidak akan diberi sanksi karena waktu tunggu yang terlalu lama, meskipun peringatan dapat dikeluarkan: umumnya Anda harus menyetel waktu tunggu sespesifik mungkin tanpa menyebabkan kegagalan.
Waktu tunggu pengujian dapat diganti dengan flag bazel --test_timeout
saat
berjalan secara manual dalam kondisi yang diketahui lambat. Nilai
--test_timeout
dalam detik. Misalnya, --test_timeout=120
menetapkan waktu tunggu pengujian menjadi dua menit.
Ada juga batas bawah yang direkomendasikan untuk waktu tunggu pengujian sebagai berikut:
timeout | Waktu minimum (dtk) |
---|---|
short | 0 |
longgar | 30 |
long | 300 |
abadi | 900 |
Misalnya, jika pengujian "sedang" selesai dalam 5,5 detik, sebaiknya tetapkan timeout =
"short"
atau size = "small"
. Menggunakan opsi command line --test_verbose_timeout_warnings
bazel akan menampilkan pengujian yang ukuran yang ditentukan terlalu besar.
Ukuran dan waktu tunggu pengujian ditentukan di file BUILD sesuai dengan spesifikasi di sini. Jika tidak ditentukan, ukuran pengujian akan ditetapkan secara default ke "sedang".
Jika proses utama pengujian keluar, tetapi beberapa turunannya masih berjalan, runner pengujian harus menganggap proses tersebut selesai dan menghitungnya sebagai berhasil atau gagal berdasarkan kode keluar yang diamati dari proses utama. Test runner dapat menghentikan proses yang menyimpang. Pengujian tidak boleh membocorkan proses dengan cara ini.
Sharding pengujian
Pengujian dapat diparalelkan melalui sharding pengujian. Lihat
--test_sharding_strategy
dan
shard_count
untuk mengaktifkan
sharding pengujian. Saat sharding diaktifkan, runner pengujian akan diluncurkan satu kali per shard. Variabel lingkungan TEST_TOTAL_SHARDS
adalah jumlah shard, dan TEST_SHARD_INDEX
adalah indeks sharding, yang dimulai dari 0. Pelari menggunakan informasi ini untuk memilih pengujian yang akan
dijalankan - misalnya, menggunakan strategi round-robin. Tidak semua test runner mendukung
sharding. Jika runner mendukung sharding, runner tersebut harus membuat atau memperbarui tanggal
terakhir diubah dari file yang ditentukan oleh
TEST_SHARD_STATUS_FILE
. Jika tidak, Bazel menganggap
aplikasi tidak mendukung sharding dan tidak akan meluncurkan runner tambahan.
Kondisi awal
Saat menjalankan pengujian, runner pengujian harus menetapkan kondisi awal tertentu.
Runner pengujian harus memanggil setiap pengujian dengan jalur ke pengujian yang dapat dieksekusi di
argv[0]
. Jalur ini harus relatif dan berada di bawah direktori pengujian saat ini (yang ada dalam hierarki runfiles, lihat di bawah). Runner pengujian tidak boleh meneruskan argumen lain ke pengujian kecuali pengguna memintanya secara eksplisit.
Blok lingkungan awal harus disusun sebagai berikut:
Variabel | Nilai | Status |
---|---|---|
HOME |
nilai $TEST_TMPDIR |
disarankan |
LANG |
tidak disetel | wajib |
LANGUAGE |
tidak disetel | wajib |
LC_ALL |
tidak disetel | wajib |
LC_COLLATE |
tidak disetel | wajib |
LC_CTYPE |
tidak disetel | wajib |
LC_MESSAGES |
tidak disetel | wajib |
LC_MONETARY |
tidak disetel | wajib |
LC_NUMERIC |
tidak disetel | wajib |
LC_TIME |
tidak disetel | wajib |
LD_LIBRARY_PATH |
daftar direktori yang dipisahkan titik dua yang berisi pustaka bersama | opsional |
JAVA_RUNFILES |
nilai $TEST_SRCDIR |
tidak digunakan lagi |
LOGNAME |
nilai $USER |
wajib |
PATH |
/usr/local/bin:/usr/local/sbin:/usr/bin:/usr/sbin:/bin:/sbin:. |
direkomendasikan |
PWD |
$TEST_SRCDIR/workspace-name |
direkomendasikan |
SHLVL |
2 |
disarankan |
TEST_INFRASTRUCTURE_FAILURE_FILE |
jalur absolut ke file pribadi di direktori yang dapat ditulisi (File ini hanya boleh digunakan untuk melaporkan kegagalan yang berasal dari infrastruktur pengujian, bukan sebagai mekanisme umum untuk melaporkan kegagalan pengujian yang tidak stabil. Dalam konteks ini, infrastruktur pengujian didefinisikan sebagai sistem atau library yang tidak spesifik untuk pengujian, tetapi dapat menyebabkan kegagalan uji dengan kegagalan fungsi. Baris pertama adalah nama komponen infrastruktur pengujian yang menyebabkan kegagalan, baris kedua adalah deskripsi kegagalan yang dapat dibaca manusia. Baris tambahan akan diabaikan). | opsional |
TEST_LOGSPLITTER_OUTPUT_FILE |
jalur absolut ke file pribadi di direktori yang dapat ditulis (digunakan untuk menulis log protobuffer Logsplitter) | opsional |
TEST_PREMATURE_EXIT_FILE |
jalur absolut ke file pribadi di direktori yang dapat ditulis (digunakan untuk menangkap panggilan ke exit() ) |
opsional |
TEST_RANDOM_SEED |
Jika opsi --runs_per_test digunakan, TEST_RANDOM_SEED ditetapkan ke run number (dimulai dengan 1) untuk setiap pengujian yang dijalankan. |
opsional |
TEST_RUN_NUMBER |
Jika opsi --runs_per_test digunakan, TEST_RUN_NUMBER ditetapkan ke run number (dimulai dengan 1) untuk setiap pengujian yang dijalankan. |
opsional |
TEST_TARGET |
Nama target yang sedang diuji | opsional |
TEST_SIZE |
Pengujian size |
opsional |
TEST_TIMEOUT |
Pengujian timeout dalam hitungan detik |
opsional |
TEST_SHARD_INDEX |
indeks shard, jika sharding digunakan |
opsional |
TEST_SHARD_STATUS_FILE |
jalur ke file yang akan disentuh guna menunjukkan dukungan untuk sharding |
opsional |
TEST_SRCDIR |
jalur absolut ke dasar hierarki runfiles | wajib |
TEST_TOTAL_SHARDS |
total
shard count ,
jika sharding digunakan |
opsional |
TEST_TMPDIR |
jalur absolut ke direktori pribadi yang dapat ditulisi | wajib |
TEST_WORKSPACE |
nama ruang kerja repositori lokal | opsional |
TEST_UNDECLARED_OUTPUTS_DIR |
jalur absolut ke direktori pribadi yang dapat ditulis (digunakan untuk menulis output pengujian yang tidak dideklarasikan) | opsional |
TEST_UNDECLARED_OUTPUTS_ANNOTATIONS_DIR |
jalur absolut ke direktori pribadi yang dapat ditulis (digunakan untuk menulis
anotasi output pengujian yang tidak dideklarasikan untuk file .part dan .pb ). |
opsional |
TEST_WARNINGS_OUTPUT_FILE |
jalur absolut ke file pribadi di direktori yang dapat ditulis (digunakan untuk menulis peringatan target pengujian) | opsional |
TESTBRIDGE_TEST_ONLY |
nilai
--test_filter ,
jika ditentukan |
opsional |
TZ |
UTC |
wajib |
USER |
nilai getpwuid(getuid())->pw_name |
wajib |
XML_OUTPUT_FILE |
Lokasi tempat tindakan pengujian harus menulis file output XML hasil pengujian. Jika tidak, Bazel akan menghasilkan file output XML default yang menggabungkan log pengujian sebagai bagian dari tindakan pengujian. Skema XML didasarkan pada skema hasil pengujian JUnit. | opsional |
BAZEL_TEST |
Menunjukkan bahwa pengujian yang dapat dieksekusi dijalankan oleh bazel test |
wajib |
Lingkungan ini dapat berisi entri tambahan. Pengujian tidak boleh bergantung pada keberadaan, ketidakhadiran, atau nilai variabel lingkungan yang tidak tercantum di atas.
Direktori kerja awal harus $TEST_SRCDIR/$TEST_WORKSPACE
.
ID proses, ID grup proses, ID sesi, dan ID proses induk saat ini tidak ditentukan. Proses ini dapat berupa pemimpin grup proses atau pemimpin sesi. Proses mungkin memiliki atau tidak memiliki terminal pengendali. Proses tersebut mungkin memiliki nol atau beberapa proses turunan yang sedang berjalan atau belum direap. Proses tidak boleh memiliki beberapa thread saat kode pengujian mendapatkan kontrol.
Deskripsi file 0 (stdin
) harus terbuka untuk dibaca, tetapi melampirkannya
tidak ditentukan. Pengujian tidak boleh membaca dari teks tersebut. Deskripsi file 1 (stdout
) dan 2
(stderr
) harus terbuka untuk ditulis, tetapi lampirannya tidak
ditentukan. Dapat berupa terminal, pipe, file biasa, atau apa pun yang dapat digunakan untuk menulis karakter. Metode ini dapat berbagi entri dalam tabel file yang terbuka (artinya, tidak dapat mencari secara independen). Pengujian tidak boleh mewarisi
deskripsi file terbuka lainnya.
Umask awal harus berupa 022
atau 027
.
Tidak ada alarm atau timer interval yang perlu ditunda.
Penyamaran awal sinyal yang diblokir harus kosong. Semua sinyal harus ditetapkan ke tindakan defaultnya.
Batas resource awal, baik ringan maupun keras, harus ditetapkan sebagai berikut:
Resource | Batas |
---|---|
RLIMIT_AS |
tak terbatas |
RLIMIT_CORE |
belum ditetapkan |
RLIMIT_CPU |
tak terbatas |
RLIMIT_DATA |
tak terbatas |
RLIMIT_FSIZE |
tak terbatas |
RLIMIT_LOCKS |
tak terbatas |
RLIMIT_MEMLOCK |
tak terbatas |
RLIMIT_MSGQUEUE |
belum ditetapkan |
RLIMIT_NICE |
belum ditetapkan |
RLIMIT_NOFILE |
minimal 1024 |
RLIMIT_NPROC |
belum ditetapkan |
RLIMIT_RSS |
tak terbatas |
RLIMIT_RTPRIO |
belum ditetapkan |
RLIMIT_SIGPENDING |
belum ditetapkan |
RLIMIT_STACK |
tak terbatas, atau 2044KB <= rlim <= 8192KB |
Waktu proses awal (seperti yang ditampilkan oleh times()
) dan pemanfaatan resource (seperti yang ditampilkan oleh getrusage()
) tidak ditentukan.
Prioritas dan kebijakan penjadwalan awal belum ditetapkan.
Peran sistem host
Selain aspek konteks pengguna di bawah kontrol langsung runner pengujian, sistem operasi tempat pengujian dijalankan harus memenuhi properti tertentu agar pengujian berjalan valid.
Filesystem
Direktori {i>root<i} yang diamati oleh pengujian mungkin merupakan direktori utama yang sebenarnya, mungkin juga bukan.
/proc
harus dipasang.
Semua alat build harus ada di jalur absolut dalam /usr
yang digunakan oleh
penginstalan lokal.
Jalur yang dimulai dengan /home
mungkin tidak tersedia. Pengujian tidak boleh mengakses
jalur tersebut.
/tmp
harus dapat ditulis, tetapi pengujian harus menghindari penggunaan jalur ini.
Pengujian tidak boleh mengasumsikan bahwa setiap jalur konstan tersedia untuk penggunaan eksklusif.
Pengujian tidak boleh mengasumsikan bahwa atimes diaktifkan untuk semua sistem file yang terpasang.
Pengguna dan grup
Root pengguna, tidak seorang pun, dan unittest harus ada. {i>Root <i}grup, tidak seorang pun, dan eng harus ada.
Pengujian harus dijalankan sebagai pengguna non-root. ID pengguna yang sebenarnya dan efektif harus sama; begitu juga untuk ID grup. Selain itu, ID pengguna, ID grup, nama pengguna, dan nama grup saat ini tidak ditentukan. Kumpulan ID grup tambahan tidak ditentukan.
ID pengguna dan ID grup saat ini harus memiliki nama yang sesuai yang dapat
diambil dengan getpwuid()
dan getgrgid()
. Hal yang sama mungkin tidak berlaku
untuk ID grup tambahan.
Pengguna saat ini harus memiliki direktori {i>home<i}. Teks ini mungkin tidak dapat ditulis. Pengujian tidak boleh mencoba menulis ke kode tersebut.
Networking
Nama host tidak ditentukan. Bagian ini mungkin atau mungkin juga tidak berisi titik. Menyelesaikan masalah nama host harus memberikan alamat IP host saat ini. Menyelesaikan potongan nama {i>host<i} setelah titik pertama juga harus berfungsi. {i>Host localhost<i} harus di-resolve.
Resource lainnya
Pengujian diberi setidaknya satu core CPU. Lainnya mungkin tersedia, tetapi ini tidak dijamin. Aspek performa lainnya dari inti ini tidak ditentukan. Anda dapat meningkatkan reservasi ke jumlah inti CPU yang lebih tinggi dengan menambahkan tag "cpu:n" (dengan n adalah bilangan positif) ke aturan pengujian. Jika total core CPU di komputer lebih sedikit dari yang diminta, Bazel akan tetap menjalankan pengujian. Jika pengujian menggunakan sharding, setiap shard individual akan menyimpan jumlah core CPU yang ditentukan di sini.
Pengujian dapat membuat subproses, tetapi tidak memproses grup atau sesi.
Ada batasan jumlah file input yang dapat digunakan oleh pengujian. Batas ini dapat berubah, tetapi saat ini berada dalam rentang puluhan ribu input.
Waktu dan tanggal
Waktu dan tanggal saat ini tidak ditentukan. Zona waktu sistem tidak ditentukan.
Jendela X mungkin tersedia atau mungkin juga tidak. Pengujian yang memerlukan server X harus memulai Xvfb.
Menguji interaksi dengan sistem file
Semua jalur file yang ditentukan dalam variabel lingkungan pengujian mengarah ke suatu tempat pada sistem file lokal, kecuali jika ditentukan lain.
Pengujian hanya boleh membuat file dalam direktori yang ditentukan oleh
$TEST_TMPDIR
dan $TEST_UNDECLARED_OUTPUTS_DIR
(jika ditetapkan).
Pada awalnya, direktori ini akan kosong.
Pengujian tidak boleh berupaya menghapus, melakukan chmod, atau mengubah direktori ini.
Direktori ini bisa berupa tautan simbolis.
Jenis sistem file $TEST_TMPDIR/.
tetap tidak ditentukan.
Pengujian juga dapat menulis file .part ke
$TEST_UNDECLARED_OUTPUTS_ANNOTATIONS_DIR
untuk menganotasi file output yang tidak dideklarasikan.
Dalam kasus yang jarang terjadi, pengujian mungkin dipaksa untuk membuat file di /tmp
. Misalnya,
batas panjang jalur untuk soket domain Unix
biasanya memerlukan pembuatan soket di /tmp
. Bazel tidak akan dapat
melacak file tersebut; pengujian itu sendiri harus berhati-hati secara hermetis, menggunakan jalur unik
agar tidak bentrok dengan file lain, menjalankan pengujian dan proses non-pengujian
secara bersamaan, dan membersihkan file yang dibuat di /tmp
.
Beberapa framework pengujian populer, seperti
JUnit4 TemporaryFolder
atau Go TempDir
, memiliki
caranya sendiri untuk membuat direktori sementara di /tmp
. Framework
pengujian ini menyertakan fungsi yang membersihkan file di /tmp
sehingga Anda dapat menggunakannya
meskipun membuat file di luar TEST_TMPDIR
.
Pengujian harus mengakses input melalui mekanisme runfiles, atau bagian lain dari lingkungan eksekusi yang secara khusus dimaksudkan untuk menyediakan file input.
Pengujian tidak boleh mengakses output lain dari sistem build di jalur yang disimpulkan dari lokasi file yang dapat dieksekusi-nya sendiri.
Tidak ditentukan apakah hierarki runfile berisi file reguler, link simbolis, atau campuran. Pohon runfiles dapat berisi symlink ke direktori.
Pengujian harus menghindari penggunaan jalur yang berisi komponen ..
dalam hierarki
runfile.
Tidak ada direktori, file, atau symlink dalam hierarki runfile (termasuk jalur yang melintasi symlink) yang harus dapat ditulis. (Dengan demikian, direktori kerja
awal tidak boleh dapat ditulis.) Pengujian tidak boleh berasumsi bahwa setiap bagian dari runfile dapat ditulis, atau dimiliki oleh pengguna saat ini (misalnya, chmod
dan chgrp
mungkin akan gagal).
Hierarki runfile (termasuk jalur yang melintasi symlink) tidak boleh berubah selama eksekusi uji. Direktori induk dan pemasangan sistem file tidak boleh berubah dengan cara apa pun yang memengaruhi hasil penyelesaian jalur dalam hierarki runfile.
Untuk menangkap exit awal, pengujian dapat membuat file di jalur yang ditentukan oleh TEST_PREMATURE_EXIT_FILE
saat dimulai dan menghapusnya saat keluar. Jika melihat file tersebut saat pengujian selesai, Bazel akan menganggap bahwa pengujian keluar sebelum waktunya dan menandainya sebagai gagal.
Konvensi tag
Beberapa tag dalam aturan pengujian memiliki arti khusus. Lihat juga
Ensiklopedia Build Bazel tentang atribut tags
.
Tag | Arti |
---|---|
exclusive |
tidak menjalankan pengujian lain secara bersamaan |
external |
pengujian memiliki dependensi eksternal; nonaktifkan cache pengujian |
large |
Konvensi test_suite ; rangkaian pengujian besar |
manual * |
tidak menyertakan target pengujian dalam pola target karakter pengganti seperti
:... , :* , atau :all |
medium |
Konvensi test_suite ; rangkaian pengujian sedang |
small |
Konvensi test_suite ; rangkaian pengujian kecil |
smoke |
Konvensi test_suite ; artinya, kode harus dijalankan sebelum
memasukkan perubahan kode ke dalam sistem kontrol versi |
Runfile
Dalam contoh berikut, anggaplah ada aturan *_binary() berlabel //foo/bar:unittest
, dengan dependensi run-time pada aturan berlabel //deps/server:server
.
Lokasi
Direktori runfile untuk //foo/bar:unittest
target adalah direktori
$(WORKSPACE)/$(BINDIR)/foo/bar/unittest.runfiles
. Jalur ini disebut sebagai
runfiles_dir
.
Dependensi
Direktori runfiles dideklarasikan sebagai dependensi waktu kompilasi
aturan *_binary()
. Direktori runfiles itu sendiri bergantung pada kumpulan file BUILD
yang memengaruhi aturan *_binary()
atau dependensi waktu kompilasi atau
waktu proses-nya. Mengubah file sumber tidak memengaruhi struktur
direktori runfiles, sehingga tidak memicu build ulang apa pun.
Daftar Isi
Direktori runfiles berisi hal-hal berikut:
- Symlink ke dependensi run-time: setiap OutputFile dan CommandRule yang
merupakan dependensi run-time dari aturan
*_binary()
direpresentasikan oleh satu symlink dalam direktori runfiles. Nama symlink adalah$(WORKSPACE)/package_name/rule_name
. Misalnya, symlink untuk server akan diberi nama$(WORKSPACE)/deps/server/server
, dan jalur lengkapnya adalah$(WORKSPACE)/foo/bar/unittest.runfiles/$(WORKSPACE)/deps/server/server
. Tujuan symlink adalah OutputFileName() dari OutputFile atau CommandRule, yang dinyatakan sebagai jalur absolut. Dengan demikian, tujuan symlink mungkin adalah$(WORKSPACE)/linux-dbg/deps/server/42/server
. - Symlink ke sub-runfile: untuk setiap
*_binary()
Z yang merupakan dependensi runtime dari*_binary()
C, ada link kedua dalam direktori runfiles C ke runfile Z. Nama symlink adalah$(WORKSPACE)/package_name/rule_name.runfiles
. Target dari {i>symlink<i} adalah direktori {i>runfile<i}. Misalnya, semua subprogram memiliki direktori runfile yang sama.