Analisis Hipotesis Bersaing (ACH): Cara Menggunakannya, dan Kapan Ia Gagal

Kaca pembesar di atas tumpukan dokumen: menimbang bukti dalam analisis hipotesis bersaing

Versi bahasa Inggris (English version)

Analisis Hipotesis Bersaing (ACH, dari Analysis of Competing Hypotheses) adalah teknik terstruktur untuk menilai penjelasan mana di antara beberapa penjelasan yang paling cocok dengan bukti. Alih-alih memilih jawaban favorit lalu mengumpulkan dukungan untuknya, ACH menjabarkan semua hipotesis yang masuk akal dan menguji setiap butir bukti terhadap semuanya sekaligus. Jawaban yang bertahan adalah jawaban yang gagal disingkirkan oleh bukti, dan sering kali itu bukan jawaban yang semula diunggulkan di ruang rapat.

Analis CIA Richards Heuer mengembangkan ACH dan menerbitkannya dalam Psychology of Intelligence Analysis (1999), yang masih menjadi salah satu buku paling banyak diajarkan dalam analisis intelijen. Sejak itu ACH menyebar dari intelijen pemerintah ke intelijen kompetitif, investigasi, keamanan siber, dan strategi korporat.

Saya memakai ACH hampir sepanjang karier saya, dalam intelijen kompetitif untuk korporasi dan dalam produk intelijen yang kami terbitkan sendiri. Halaman ini menjelaskan metodenya, menelusuri satu contoh, dan merangkum apa kata penelitian tentang kapan ACH membantu dan kapan tidak.

Sekilas

  • ACH menguji bukti terhadap setiap hipotesis sekaligus, bukan hanya terhadap yang favorit.
  • ACH mencari bukti yang membantah, bukan bukti yang mendukung. Satu inkonsistensi yang kuat dapat menggugurkan sebuah hipotesis; setumpuk bukti yang konsisten tidak dapat membuktikan satu pun.
  • Yang penting adalah bukti yang diagnostik. Bukti yang cocok dengan semua hipotesis hampir tidak memberi tahu apa-apa.
  • Hasilnya berupa peringkat ditambah daftar pantauan: penjelasan mana yang bertahan, dan tanda apa di masa depan yang akan mengubah jawabannya.
  • ACH bukan sihir. Eksperimen menunjukkan ACH dapat membantu menata pikiran, tetapi tidak otomatis menghilangkan bias. ACH paling efektif di dalam proses yang disiplin.

Mengapa ACH ada: masalah analisis intuitif

Cara alami menganalisis suatu pertanyaan adalah membentuk pandangan sejak awal lalu mengumpulkan bukti untuknya. Rasanya seperti ketelitian. Sebenarnya itu pembelaan, dan begitulah orang-orang cerdas meyakinkan diri sendiri akan kesalahan yang dibuat dengan penuh percaya diri.

Masalahnya adalah bias konfirmasi. Sebagian besar bukti konsisten dengan lebih dari satu penjelasan, sehingga analis yang bertekad selalu dapat menemukan dukungan untuk jawaban yang sudah ia sukai. Wawasan Heuer adalah bahwa obatnya harus berupa prosedur. Mengetahui adanya bias tidak melindungi Anda darinya; struktur yang memaksa Anda mempertimbangkan alternatiflah yang melindungi. Lihat panduan bias kognitif (dalam bahasa Inggris) untuk katalog yang lebih luas.

Komunitas intelijen AS kemudian memasukkan gagasan itu ke dalam standar resminya. ICD 203, direktif yang menetapkan standar analisis untuk seluruh komunitas, mewajibkan analis memasukkan analisis alternatif (ODNI, ICD 203).

Delapan langkah ACH

Heuer menggambarkan ACH sebagai prosedur delapan langkah (Heuer, bab 8). Secara sederhana:

  1. Daftarkan hipotesis. Kumpulkan setiap penjelasan yang masuk akal, idealnya bersama orang-orang yang melihat masalahnya secara berbeda. Masukkan juga yang tidak Anda sukai.
  2. Daftarkan bukti dan argumen. Masukkan fakta, laporan, asumsi, dan argumen logis, dan perhatikan apa yang tidak ada sebagaimana apa yang ada.
  3. Susun matriks. Hipotesis di bagian atas, bukti di bagian samping. Untuk setiap sel, tanyakan apakah butir itu konsisten, inkonsisten, atau tidak relevan dengan hipotesis itu.
  4. Perbaiki matriks. Rumuskan ulang atau gabungkan hipotesis, dan buang bukti yang tidak membantu membedakan hipotesis.
  5. Tarik kesimpulan sementara. Telusuri setiap kolom hipotesis untuk mencari inkonsistensi. Hipotesis yang paling mungkin biasanya adalah yang paling sedikit bukti melawannya, bukan yang paling banyak bukti mendukungnya.
  6. Uji sensitivitas. Tanyakan pada beberapa butir mana kesimpulan Anda benar-benar bertumpu, dan apa yang terjadi jika salah satunya keliru, menyesatkan, atau sengaja ditanam.
  7. Laporkan kesimpulan, termasuk kemungkinan relatif setiap hipotesis, bukan hanya pemenangnya.
  8. Tetapkan tonggak. Sebutkan pengamatan di masa depan yang akan memberi tahu Anda bahwa peristiwa mengambil arah lain.
Contoh matriks ACH yang menguji empat hipotesis terhadap empat butir bukti, dengan jumlah inkonsistensi dihitung
Matriks ACH untuk contoh di atas. Bukti yang paling mencolok, lowongan kerja, cocok dengan setiap hipotesis dan tidak menentukan apa pun.

Gagasan kunci: diagnostisitas

Konsep paling berguna dalam ACH adalah diagnostisitas. Bukti bersifat diagnostik jika membantu membedakan hipotesis satu dari yang lain. Bukti yang konsisten dengan semua hipotesis bisa terasa sangat mendukung favorit Anda, tetapi tidak membantu Anda memilih.

Ini membalik cara kebanyakan organisasi membaca informasi. Para eksekutif cenderung menimbang bukti menurut seberapa mencolok, baru, atau berwibawa bukti itu. ACH mengajukan pertanyaan lain: apakah butir ini membuat salah satu hipotesis kurang mungkin? Jika tidak, sisihkan, seberapa pun mengesankannya.

Sebuah contoh

Misalkan seorang pesaing memasang selusin lowongan untuk insinyur baterai dalam dua bulan terakhir. Pimpinan ingin tahu artinya. Empat hipotesis:

  • H1: Pesaing sedang membangun lini produk baterainya sendiri.
  • H2: Ia memproduksi sendiri komponen yang tadinya dialihdayakan untuk memangkas biaya.
  • H3: Ia bersiap mengakuisisi perusahaan rintisan baterai dan merekrut lebih dulu menjelang transaksi.
  • H4: Ini pergantian karyawan biasa, dan lowongan itu tidak banyak artinya.

Sekarang buktinya:

  • Lowongan kerja itu sendiri cocok dengan keempat hipotesis. Tidak membedakan apa pun.
  • Posisinya di perakitan paket baterai dan mutu pemasok, bukan riset kimia sel. Itu inkonsisten dengan H1, karena lini baterai baru membutuhkan ahli kimia, dan dengan H4, karena gelombang rekrutmen yang terpusat pada satu fungsi bukan pergantian biasa. Bukti ini cocok dengan H2.
  • Pemasok utama pesaing baru-baru ini menaikkan harga. Konsisten dengan H2; tidak mengatakan apa-apa tentang yang lain.
  • Tidak ada aktivitas pendanaan atau rumor akuisisi dalam dokumen resmi maupun media industri. Itu inkonsisten dengan H3.

Bukti yang paling mencolok, lonjakan lowongan, ternyata paling tidak diagnostik. Detail-detail yang tidak mencolok, posisi apa dan apa lagi yang terjadi, yang bekerja. H2 bertahan tanpa inkonsistensi. Tonggak yang perlu dipantau: perubahan kontrak pemasok, izin pabrik, dan pendanaan baru apa pun yang akan menghidupkan kembali H3.

Apa kata penelitian tentang ACH

ACH banyak diajarkan, tetapi bukti bahwa ACH memperbaiki penilaian masih beragam.

Dalam eksperimen tahun 2019, Mandeep Dhami, Ian Belton, dan David Mandel secara acak membagi 50 analis intelijen ke kelompok yang memakai ACH dan yang tidak, untuk masalah yang sama. Mereka menyimpulkan bahwa komunitas intelijen sebaiknya mempertimbangkan dalam kondisi apa ACH berguna dan menjajaki alternatif (Dhami, Belton & Mandel, Applied Cognitive Psychology, 2019). Sebuah tinjauan atas eksperimen terkait melaporkan bahwa analis yang memakai ACH terkadang kurang koheren dalam menetapkan probabilitas dibanding yang tidak memakainya, dan lebih jarang menggunakan informasi tingkat dasar (Karvetski, Mandel & Irwin, Judgment and Decision Making, 2020).

Rekan kerja saling menantang penalaran di depan papan tulis, sebuah pemeriksaan dalam analisis hipotesis bersaing

Itu tidak membuat ACH tidak berguna. Artinya, matriks bukan pengganti penilaian. Menurut pengalaman saya, ACH sepadan dengan usahanya bila empat syarat terpenuhi:

  • Hipotesisnya benar-benar berbeda, sehingga bukti dapat memisahkannya.
  • Tingkat dasar dipertimbangkan lebih dulu: seberapa sering setiap penjelasan ternyata benar dalam situasi seperti ini?
  • Seseorang di luar tim menantang daftar hipotesis, karena penjelasan yang tidak ditulis siapa pun adalah yang akan mengejutkan Anda.
  • Tonggaknya benar-benar dipantau, sehingga analisis tetap hidup setelah rapat.

Digunakan dengan cara itu, ACH bukan kalkulator melainkan disiplin: ia membuat argumen terlihat, sehingga orang lain dapat memeriksanya.

Posisi ACH

ACH adalah salah satu dari keluarga teknik analisis terstruktur. ACH bekerja baik bersama:

  • Perencanaan skenario (dalam bahasa Inggris), untuk pertanyaan tentang masa depan, bukan penjelasan tentang masa kini.
  • Mengevaluasi prakiraan (dalam bahasa Inggris), ketika Anda menilai klaim orang lain.
  • Premortem, yang menganggap sebuah rencana sudah gagal lalu bertanya mengapa.
  • Budaya prakiraan (dalam bahasa Inggris), karena tidak ada teknik yang membantu jika organisasi enggan bertindak atas jawaban yang tidak disukai.

Pertanyaan yang sering diajukan

Apa itu Analisis Hipotesis Bersaing?

ACH adalah teknik analisis terstruktur yang dikembangkan analis CIA Richards Heuer. Teknik ini menilai beberapa kemungkinan penjelasan sekaligus dengan menguji setiap butir bukti terhadap setiap hipotesis, dan mengunggulkan hipotesis yang paling sedikit bukti melawannya.

Siapa pencipta ACH?

Richards J. Heuer Jr., analis CIA selama bertahun-tahun, mengembangkan ACH dan menguraikannya dalam bukunya tahun 1999, Psychology of Intelligence Analysis, yang diterbitkan Center for the Study of Intelligence CIA.

Apa itu diagnostisitas dalam ACH?

Diagnostisitas adalah seberapa baik sebuah bukti membantu membedakan hipotesis. Bukti yang konsisten dengan semua hipotesis memiliki diagnostisitas rendah, seberapa pun kuat tampaknya ia mendukung salah satunya.

Apakah ACH menghilangkan bias konfirmasi?

Tidak dengan sendirinya. Eksperimen dengan analis intelijen memberikan hasil yang beragam. ACH paling membantu bila hipotesisnya berbeda, tingkat dasar dipertimbangkan, dan pihak luar menantang daftar hipotesis.

Bisakah perusahaan memakai ACH?

Bisa. ACH dipakai dalam intelijen kompetitif, investigasi, keamanan siber, dan strategi, di mana pun sebuah tim harus memilih di antara penjelasan yang bersaing atas bukti yang tidak lengkap.

Bekerja sama dengan Competitive Futures

Kami memakai analisis terstruktur, termasuk ACH, dalam pekerjaan intelijen kompetitif dan produk intelijen yang kami terbitkan, dan mengajarkannya dalam pendidikan eksekutif serta kursus analisis strategis tingkat lanjut kami. Jika tim Anda menghadapi keputusan yang bergantung pada membaca bukti yang tidak lengkap dengan benar, ajukan percakapan 20 menit.

Analisis terkait dari Competitive Futures

Referensi

  • Dhami, M. K., Belton, I. K., & Mandel, D. R. (2019). The “analysis of competing hypotheses” in intelligence analysis. Applied Cognitive Psychology, 33(6), 1080–1090. doi.org/10.1002/acp.3550
  • Heuer, R. J., Jr. (1999). Psychology of Intelligence Analysis, ch. 8. Center for the Study of Intelligence, CIA. cia.gov
  • Karvetski, C. W., Mandel, D. R., & Irwin, D. (2020). Coherence of probability judgments from uncertain evidence: Does ACH help? Judgment and Decision Making, 15(6), 939–958.
  • Office of the Director of National Intelligence (2015, amended 2022). Intelligence Community Directive 203: Analytic Standards. odni.gov