Temukan cara menggabungkan berbagai jenis pengujian menjadi strategi yang sesuai dengan project Anda.
Selamat datang kembali! Artikel terakhir memberikan banyak dasar tentang cara mendekati berbagai jenis pengujian dan apa yang ada di dalamnya, serta mengklarifikasi definisi jenis pengujian. Ingat gambar meme kecil ini? Anda mungkin bertanya-tanya bagaimana semua jenis pengujian yang telah Anda pelajari dapat bekerja sama.

Selanjutnya, Anda akan mempelajari hal tersebut. Artikel ini memberikan pengantar tentang cara menggabungkan jenis pengujian ini ke dalam strategi yang wajar dan memilih strategi yang sesuai dengan project Anda.
Anda dapat membandingkan strategi dengan sejumlah bentuk untuk lebih memahami maknanya. Berikut adalah daftar strategi dengan ukuran dan cakupan pengembangan masing-masing.
Mari kita pelajari lebih lanjut strategi tersebut dan pelajari arti di balik namanya.
Tentukan sasaran pengujian: Apa yang ingin Anda capai dengan pengujian ini?
Sebelum Anda dapat mulai menyusun strategi yang baik, tentukan sasaran pengujian Anda. Kapan Anda menganggap bahwa aplikasi Anda telah diuji secara memadai?
Mencapai cakupan pengujian yang tinggi sering kali dianggap sebagai tujuan akhir bagi developer dalam hal pengujian. Namun, apakah ini selalu merupakan pendekatan terbaik? Mungkin ada faktor penting lain yang perlu dipertimbangkan saat memutuskan strategi pengujian—memenuhi kebutuhan pengguna.
Sebagai developer, Anda juga menggunakan banyak aplikasi dan perangkat lain. Dalam hal ini, Anda adalah pengguna yang mengandalkan semua sistem ini agar “berfungsi sebagaimana mestinya”. Pada gilirannya, Anda mengandalkan banyak developer untuk melakukan yang terbaik agar aplikasi dan perangkat mereka berfungsi. Untuk membalasnya, sebagai developer, Anda juga berusaha untuk memenuhi kepercayaan ini. Jadi, sasaran pertama Anda harus selalu mengirimkan software yang berfungsi dan melayani pengguna. Hal ini juga berlaku untuk pengujian yang Anda tulis untuk memastikan kualitas aplikasi. Kent C. Dodds merangkumnya dengan sangat baik dalam postingannya yang berjudul Static vs Unit vs Integration vs E2E Testing for Frontend Apps:
Makin mirip pengujian Anda dengan cara software digunakan, makin besar keyakinan yang dapat diberikan pengujian tersebut kepada Anda.
oleh Kent C. Dodds
Kent menggambarkannya sebagai mendapatkan keyakinan dalam pengujian. Semakin dekat Anda dengan pengguna dengan memilih jenis pengujian yang sesuai, semakin Anda dapat memercayai pengujian Anda untuk mendapatkan hasil yang valid. Dengan kata lain, makin tinggi Anda mendaki piramida, makin percaya diri Anda. Tapi tunggu, apa itu piramida?
Menentukan strategi pengujian: Cara memilih strategi pengujian
Sebagai langkah pertama, tentukan bagian persyaratan mana yang perlu Anda periksa untuk memastikan persyaratan tersebut terpenuhi. Cari tahu jenis pengujian yang akan digunakan dan tingkat detail yang dapat Anda capai untuk mendapatkan keyakinan tertinggi sekaligus mempertahankan struktur biaya yang efisien. Banyak developer membahas topik ini dengan menggunakan analogi. Berikut adalah yang paling umum, dimulai dengan yang klasik dan terkenal.

Klasik: Piramida pengujian
Begitu Anda mulai mencari strategi pengujian, Anda mungkin akan menemukan piramida otomatisasi pengujian sebagai analogi pertama. Mike Cohn memperkenalkan konsep ini dalam bukunya "Succeeding with Agile". Kemudian, Martin Fowler memperluas konsep tersebut dalam artikelnya, Practical Test Pyramid. Anda dapat merepresentasikan piramida secara visual sebagai berikut:

Seperti yang ditunjukkan dalam gambar ini, piramida pengujian terdiri dari tiga lapisan:
Unit. Anda akan menemukan pengujian ini di lapisan dasar piramida karena pengujian ini cepat dijalankan dan mudah dikelola. Pengujian ini terisolasi dan menargetkan unit pengujian yang paling kecil. Misalnya, lihat pengujian unit standar untuk produk yang sangat kecil.
Integrasi. Pengujian ini berada di tengah piramida, karena memiliki kecepatan eksekusi yang dapat diterima, tetapi membawa Anda lebih dekat ke pengguna daripada pengujian unit. Contoh pengujian integrasi adalah pengujian API. Anda juga dapat mengklasifikasikan pengujian komponen sebagai jenis ini.
Pengujian E2E (juga disebut pengujian UI). Pengujian ini menyimulasikan pengguna asli dan interaksinya. Pengujian tersebut memerlukan lebih banyak waktu untuk dijalankan sehingga lebih mahal. Mereka berada di puncak piramida.
Keyakinan versus resource
Seperti yang telah dibahas sebelumnya, urutan lapisan bukanlah suatu kebetulan. Tabel ini menunjukkan prioritas dan biaya yang sesuai. Hal ini memberi Anda gambaran yang jelas tentang jumlah pengujian yang harus Anda tulis untuk setiap lapisan. Anda telah melihat hal ini dalam definisi jenis pengujian.
Karena pengujian E2E paling dekat dengan pengguna, pengujian ini memberi Anda keyakinan terbesar bahwa aplikasi Anda berfungsi sebagaimana mestinya. Namun, pengujian ini memerlukan stack aplikasi lengkap dan pengguna yang disimulasikan, sehingga berpotensi menjadi yang paling mahal. Jadi, keyakinan bersaing langsung dengan resource yang Anda perlukan untuk menjalankan pengujian.

Piramida ini mencoba menyelesaikan masalah ini dengan membuat Anda lebih berfokus pada pengujian unit dan memprioritaskan kasus yang dicakup oleh pengujian E2E secara ketat. Misalnya, perjalanan pengguna yang paling penting atau tempat yang paling rentan terhadap cacat. Seperti yang ditekankan Martin Fowler, dua poin paling penting dalam piramida Cohn adalah sebagai berikut:
- Tulis pengujian dengan perincian yang berbeda.
- Semakin tinggi levelnya, semakin sedikit pengujian yang harus Anda lakukan.
Pyramid berevolusi! Adaptasi piramida pengujian
Selama beberapa tahun, diskusi telah berkisar pada piramida. Piramida ini tampaknya terlalu menyederhanakan strategi pengujian, mengabaikan banyak jenis pengujian, dan tidak lagi sesuai dengan semua project di dunia nyata. Oleh karena itu, hal ini mungkin menyesatkan. Apakah piramida telah kehilangan bentuknya? Guillermo Rauch memiliki pendapat tentang hal ini:
Menulis pengujian. Tidak terlalu banyak. Sebagian besar integrasi.
oleh Guillermo Rauch
Kutipan ini adalah salah satu yang paling sering dikutip terkait topik ini, jadi mari kita bahas:
- "Tulis pengujian". Tidak hanya karena membangun kepercayaan, tetapi juga karena menghemat waktu dalam pemeliharaan.
- "Tidak terlalu banyak". Cakupan 100% tidak selalu baik karena pengujian Anda tidak diprioritaskan dan akan ada banyak pemeliharaan.
- "Sebagian besar integrasi". Di sini, penekanannya adalah pada pengujian integrasi: pengujian ini memiliki nilai bisnis paling tinggi dengan memberi Anda tingkat keyakinan tinggi setiap hari sekaligus mempertahankan waktu eksekusi yang wajar.
Hal ini membuat Anda berpikir ulang tentang piramida pengujian dan mengalihkan fokus ke pengujian integrasi. Selama beberapa tahun terakhir, banyak adaptasi telah diusulkan, jadi mari kita lihat yang paling umum.
Diamond pengujian
Adaptasi pertama menghilangkan penekanan berlebihan pada pengujian unit, seperti yang terlihat dalam piramida pengujian. Bayangkan Anda telah mencapai cakupan 100% pada pengujian unit. Namun, saat melakukan refaktorisasi berikutnya, Anda harus memperbarui banyak pengujian unit ini dan Anda mungkin tergoda untuk melewatinya. Jadi, mereka terkikis.
Akibatnya, dan bersama dengan fokus yang lebih tinggi pada pengujian integrasi, bentuk berikut dapat muncul:

Piramida berkembang menjadi berlian. Anda dapat melihat tiga lapisan sebelumnya, tetapi dengan ukuran yang berbeda, dan lapisan unit telah dipotong:
- Unit. Tulis pengujian unit seperti yang Anda tentukan sebelumnya. Namun, karena cenderung terkikis, prioritaskan dan cakup hanya kasus yang paling penting.
- Integrasi. Pengujian integrasi yang Anda ketahui, menguji kombinasi unit tunggal.
- E2E. Lapisan ini menangani pengujian UI yang mirip dengan piramida pengujian. Berhati-hatilah untuk hanya menulis pengujian E2E untuk kasus pengujian yang paling penting.
Menguji honeycomb
Ada adaptasi lain, yang diperkenalkan oleh Spotify, yang mirip dengan berlian pengujian, tetapi lebih dikhususkan untuk sistem software berbasis microservice. Sarang lebah pengujian adalah analogi visual lain untuk perincian, cakupan, dan jumlah pengujian yang harus ditulis untuk sistem software berbasis microservice. Karena ukurannya yang kecil, kompleksitas terbesar dalam microservice bukanlah di dalam layanan itu sendiri, melainkan dalam cara layanan tersebut berinteraksi dengan layanan lain. Jadi, strategi pengujian untuk microservice harus berfokus terutama pada pengujian integrasi.

Bentuk ini mengingatkan kita pada sarang lebah, itulah sebabnya dinamakan demikian. Lapisan tersebut adalah sebagai berikut:
- Pengujian terintegrasi. Artikel dari Spotify menggunakan kutipan dari J. B. Rainsberger untuk menentukan lapisan ini: “Pengujian yang akan lulus atau gagal berdasarkan kebenaran sistem lain”. Pengujian tersebut memiliki dependensi eksternal yang perlu Anda pertimbangkan, dan sebaliknya, sistem Anda mungkin merupakan dependensi yang merusak sistem lain. Serupa dengan pengujian E2E dalam analogi lain, gunakan pengujian ini dengan hati-hati, hanya untuk kasus yang paling penting.
- Pengujian integrasi. Sama seperti adaptasi lainnya, Anda harus berfokus pada lapisan ini. Pengujian ini berisi pengujian yang memverifikasi kebenaran layanan Anda dengan cara yang lebih terisolasi, tetapi masih dikombinasikan dengan layanan lain. Artinya, pengujian juga akan mencakup beberapa sistem lain dan berfokus pada titik interaksi, misalnya, melalui pengujian API.
- Pengujian pada detail implementasi. Pengujian ini menyerupai pengujian unit—pengujian yang berfokus pada bagian kode yang terisolasi secara alami dan dengan demikian memiliki kompleksitas internalnya sendiri.
Jika Anda ingin mengetahui lebih lanjut strategi pengujian ini, lihat postingan yang membandingkan piramida pengujian dengan honeycomb oleh Martin Fowler dan artikel asli dari Spotify.
Trofi pengujian
Anda sudah dapat melihat fokus berulang pada pengujian integrasi. Namun, jenis lain yang Anda temui di artikel sebelumnya bukanlah pengujian secara teori, tetapi tetap merupakan aspek penting yang harus Anda pertimbangkan dalam strategi pengujian. Analisis statis tidak ada dalam piramida pengujian dan di sebagian besar adaptasi yang telah Anda lihat sejauh ini. Ada adaptasi trofi pengujian yang mempertimbangkan analisis statis sekaligus mempertahankan fokus pada pengujian integrasi. Trofi pengujian berasal dari kutipan sebelumnya oleh Guillermo Rauch dan dikembangkan oleh Kent C. Dodds:

Trofi pengujian adalah analogi yang menggambarkan perincian pengujian dengan cara yang sedikit berbeda. Model ini memiliki empat lapisan:
- Analisis statis. Alat ini memainkan peran penting dalam analogi ini dan memungkinkan Anda menemukan kesalahan ketik, kesalahan gaya, dan bug lainnya hanya dengan menjalankan langkah-langkah proses debug yang telah diuraikan.
- Pengujian unit. Pengujian ini memastikan bahwa unit terkecil Anda diuji dengan tepat, tetapi trofi pengujian tidak akan menekankannya sejauh piramida pengujian.
- Integrasi. Ini adalah fokus utama karena menyeimbangkan biaya dan keyakinan yang lebih tinggi dengan cara terbaik, seperti halnya adaptasi lainnya.
- Pengujian UI. Termasuk pengujian E2E dan visual, pengujian ini berada di bagian atas trofi pengujian, mirip dengan perannya dalam piramida pengujian.
Untuk membaca lebih lanjut tentang trofi pengujian, lihat postingan blog oleh Kent C. Dodds tentang topik ini.
Beberapa pendekatan yang lebih berfokus pada UI
Semua itu bagus, tetapi apa pun sebutan strategi Anda, “piramida”, “sarang lebah”, atau “berlian”, masih ada yang kurang. Meskipun otomatisasi pengujian sangat bermanfaat, perlu diingat bahwa pengujian manual tetap penting. Pengujian otomatis akan meringankan tugas rutin dan memberi kebebasan kepada engineer uji mutu untuk berfokus pada area penting. Alih-alih menggantikan pengujian manual, otomatisasi harus melengkapinya. Apakah ada cara untuk mengintegrasikan pengujian manual dengan otomatisasi untuk mendapatkan hasil yang optimal?
Testing ice cone dan testing crab
Memang ada dua adaptasi piramida pengujian yang lebih berfokus pada cara pengujian yang berfokus pada UI ini. Keduanya memiliki keunggulan keyakinan yang tinggi, tetapi tentu saja lebih mahal karena eksekusi uji yang lebih lambat.
Yang pertama, kerucut es uji, terlihat seperti piramida terbalik. Tanpa langkah pengujian manual, model ini juga dikenal sebagai pizza pengujian.

Kerucut es lebih berfokus pada pengujian manual atau UI dan paling sedikit berfokus pada pengujian unit. Hal ini sering terjadi dalam project yang dimulai oleh developer dengan hanya sedikit pemikiran tentang strategi pengujian. Kode ice dianggap sebagai antipola dan memang demikian. Kode ini mahal dalam hal resource dan pekerjaan manual.
Kepiting pengujian mirip dengan kerucut es pengujian, tetapi lebih menekankan pada pengujian E2E dan visual:

Strategi pengujian ini mencakup satu aspek lagi: strategi ini memverifikasi bahwa aplikasi Anda berfungsi dan terlihat bagus. Kepiting pengujian menyoroti pentingnya pengujian visual, yang didefinisikan dalam artikel sebelumnya. Pengujian integrasi, yang dibagi menjadi pengujian komponen dan API, semakin bergeser ke latar belakang, dan pengujian unit memainkan peran yang lebih sekunder di sini. Anda dapat menemukan detail selengkapnya tentang strategi pengujian ini dalam artikel tentang kepiting pengujian ini.
Meskipun lebih mahal, kedua strategi pengujian ini memiliki tempatnya sendiri: misalnya, dalam project yang lebih kecil yang memerlukan lebih sedikit pengujian, atau kompleksitas yang perlu dicakup lebih sedikit. Dalam hal ini, strategi pengujian menyeluruh yang berfokus pada pengujian integrasi mungkin terlalu rumit.
Meskipun kedua strategi pengujian ini lebih mahal, keduanya memiliki tempat, misalnya, dalam project yang lebih kecil yang memerlukan lebih sedikit pengujian dan tidak perlu mencakup banyak kompleksitas. Dalam hal ini, strategi pengujian skala penuh yang berfokus pada pengujian integrasi mungkin terlalu rumit.
Saran praktis: Mari susun strategi
Anda kini telah mempelajari strategi pengujian yang paling umum. Anda memulai dengan model klasik—piramida pengujian—dan mengenal banyak adaptasinya. Sekarang Anda perlu mengevaluasinya untuk produk Anda dan memutuskan mana yang terbaik untuk project Anda. Jawaban untuk pertanyaan ini harus dimulai dengan jawaban favorit semua orang, "Tergantung". Namun, hal itu tidak mengurangi akurasinya.

Pilihan strategi pengujian yang paling tepat dari yang dijelaskan—dan bahkan yang tidak disebutkan—bergantung pada aplikasi Anda. Model tersebut harus sesuai dengan arsitektur, persyaratan, dan yang tidak kalah penting, pengguna Anda serta persyaratan mereka. Semua ini mungkin berbeda dari satu aplikasi ke aplikasi lainnya. Hal itu sangatlah wajar. Ingatlah bahwa sasaran terpenting Anda adalah melayani pengguna, bukan definisi buku teks.
Sering kali, pengujian di dunia nyata sulit dipisahkan dan ditentukan satu per satu. Bahkan Martin Fowler sendiri menekankan aspek positif dari definisi yang berbeda, seperti dalam kasus pengujian unit. Seperti yang dinyatakan dengan benar oleh Justin Searls dalam tweet-nya:
[…] menulis pengujian ekspresif yang menetapkan batasan yang jelas, berjalan dengan cepat & andal, dan hanya gagal karena alasan yang berguna.
oleh Justin Searls
Fokuslah pada pengujian yang melaporkan error aktual yang mungkin dialami pengguna, dan jangan teralihkan dari sasaran Anda. Pengujian harus dirancang untuk memberikan manfaat bagi pengguna, bukan hanya memberikan cakupan 100% atau untuk memperdebatkan persentase jenis pengujian yang akan ditulis.
Fokus pada pengujian yang melaporkan error di dunia nyata yang mungkin dialami pengguna Anda dan jangan teralihkan dari sasaran Anda. Pengujian harus dirancang untuk memberikan manfaat bagi pengguna, bukan hanya memberikan cakupan 100% atau memicu perdebatan tentang persentase jenis pengujian tertentu yang harus Anda tulis.