Analyse af konkurrerende hypoteser (ACH): sådan bruger du den, og hvornår den fejler

Forstørrelsesglas over en stak dokumenter: at afveje beviser i analyse af konkurrerende hypoteser

Engelsk version (English version)

Analyse af konkurrerende hypoteser (ACH, efter engelsk Analysis of Competing Hypotheses) er en struktureret teknik til at vurdere, hvilken af flere forklaringer der passer bedst til beviserne. I stedet for at vælge et yndlingssvar og samle støtte til det lægger ACH alle rimelige hypoteser frem og prøver hvert bevis mod dem alle på én gang. Det svar, der overlever, er det, beviserne ikke kan udelukke, og det er ofte ikke det, rummet startede med.

CIA-analytikeren Richards Heuer udviklede ACH og offentliggjorde den i Psychology of Intelligence Analysis (1999), som stadig er en af de mest brugte bøger i undervisningen i efterretningsanalyse. Siden har ACH bredt sig fra statslig efterretning til competitive intelligence, efterforskning, cybersikkerhed og virksomhedsstrategi.

Jeg har brugt ACH det meste af min karriere, i competitive intelligence for virksomheder og i vores egne udgivne efterretningsprodukter. Denne side forklarer metoden, gennemgår et eksempel og samler, hvad forskningen siger om, hvornår den hjælper, og hvornår den ikke gør.

Kort fortalt

  • ACH prøver beviser mod alle hypoteser på én gang, ikke kun mod favoritten.
  • Den leder efter beviser, der modbeviser, ikke beviser, der støtter. Én solid modstrid kan fjerne en hypotese; en bunke forenelige beviser kan ikke bevise nogen.
  • Det er de diagnostiske beviser, der tæller. Beviser, der passer til alle hypoteser, siger næsten ingenting.
  • Resultatet er en rangordning plus en overvågningsliste: hvilke forklaringer der overlever, og hvilke fremtidige tegn der ville ændre svaret.
  • Det er ikke magi. Eksperimenter viser, at ACH kan hjælpe med at ordne tænkningen, men ikke automatisk fjerner bias. Den virker bedst inden for en disciplineret proces.

Hvorfor ACH findes: problemet med intuitiv analyse

Den naturlige måde at analysere et spørgsmål på er at danne sig en holdning tidligt og derefter samle beviser for den. Det føles som grundighed. I virkeligheden er det en forsvarstale, og det er sådan, kloge mennesker overbeviser sig selv om selvsikre fejl.

Problemet er bekræftelsesbias. De fleste beviser er forenelige med mere end én forklaring, så en målrettet analytiker kan altid finde støtte til det svar, vedkommende allerede kan lide. Heuers indsigt var, at modgiften må være en fremgangsmåde. At kende til bias beskytter dig ikke mod det; en struktur, der tvinger dig til at overveje alternativerne, gør. Se guiden til kognitive bias (på engelsk) for et bredere katalog.

Det amerikanske efterretningssamfund har siden skrevet tanken ind i sine formelle standarder. ICD 203, direktivet der fastsætter analysestandarderne for hele samfundet, kræver, at analytikere inddrager analyse af alternativer (ODNI, ICD 203).

ACH’s otte trin

Heuer beskrev ACH som en procedure i otte trin (Heuer, kap. 8). Enkelt sagt:

  1. Opstil hypoteserne. Saml alle rimelige forklaringer, helst sammen med folk, der ser problemet anderledes. Tag dem med, du ikke kan lide.
  2. Opstil beviser og argumenter. Tag fakta, rapporter, antagelser og logiske argumenter med, og læg mærke til, hvad der mangler, lige så vel som hvad der er til stede.
  3. Byg matricen. Hypoteserne øverst, beviserne ned langs siden. Spørg for hvert felt, om beviset er foreneligt, uforeneligt eller irrelevant for hypotesen.
  4. Forfin matricen. Omformulér eller slå hypoteser sammen, og fjern beviser, der ikke hjælper med at skelne mellem dem.
  5. Drag foreløbige konklusioner. Gå hver hypotesekolonne igennem og led efter modstrid. Den mest sandsynlige hypotese er som regel den med færrest beviser imod, ikke den med flest beviser for.
  6. Test følsomheden. Spørg, hvilke få beviser din konklusion reelt hviler på, og hvad der sker, hvis et af dem er forkert, vildledende eller bevidst plantet.
  7. Rapportér konklusionerne, herunder den relative sandsynlighed for hver hypotese, ikke kun vinderens.
  8. Sæt milepæle. Navngiv de fremtidige observationer, der ville fortælle dig, at begivenhederne tager en anden retning.
Eksempel på en ACH-matrice, der prøver fire hypoteser mod fire beviser og tæller modstridighederne
En ACH-matrice for eksemplet. Det mest iøjnefaldende bevis, stillingsopslagene, passer til alle hypoteser og afgør ingenting.

Kerneidéen: diagnosticitet

Det mest nyttige begreb i ACH er diagnosticitet. Et bevis er diagnostisk, hvis det hjælper dig med at skelne hypoteserne fra hinanden. Beviser, der er forenelige med alle hypoteser, kan føles som stærk støtte til din favorit, men de hjælper dig ikke med at vælge.

Det vender op og ned på, hvordan de fleste organisationer læser information. Ledere vejer gerne beviser efter, hvor iøjnefaldende, nye eller autoritative de er. ACH stiller et andet spørgsmål: gør dette bevis nogen hypotese mindre sandsynlig? Hvis ikke, så læg det til side, uanset hvor imponerende det ser ud.

Et gennemgået eksempel

Antag, at en konkurrent har slået et dusin stillinger op for batteriingeniører i løbet af de seneste to måneder. Ledelsen vil vide, hvad det betyder. Fire hypoteser:

  • H1: Konkurrenten opbygger sin egen batteriproduktlinje.
  • H2: Den hjemtager en udliciteret komponent for at sænke omkostningerne.
  • H3: Den forbereder opkøbet af en batteri-startup og ansætter forud for handlen.
  • H4: Det er almindelig personaleomsætning, og opslagene betyder ikke meget.

Nu beviserne:

  • Selve stillingsopslagene passer til alle fire hypoteser. De skelner ikke mellem noget.
  • Stillingerne er inden for montage af batteripakker og leverandørkvalitet, ikke forskning i cellekemi. Det er uforeneligt med H1, fordi en ny batterilinje ville kræve kemikere, og med H4, fordi en koncentreret bølge i én funktion ikke er almindelig omsætning. Det passer til H2.
  • Konkurrentens hovedleverandør har for nylig hævet sine priser. Foreneligt med H2; siger intet om de andre.
  • Ingen finansieringsaktivitet eller rygter om handler ses i offentlige indberetninger eller fagpressen. Det er uforeneligt med H3.

Det mest iøjnefaldende bevis, bølgen af opslag, viser sig at være det mindst diagnostiske. Det er de stille detaljer, hvilke stillinger og hvad ellers der skete, der gør arbejdet. H2 overlever uden modstrid. Milepæle at holde øje med: ændrede leverandørkontrakter, fabrikstilladelser og enhver ny finansiering, der ville genoplive H3.

Hvad forskningen siger om ACH

ACH undervises bredt, men belæggene for, at den forbedrer dømmekraften, er blandede.

I et eksperiment fra 2019 fordelte Mandeep Dhami, Ian Belton og David Mandel tilfældigt 50 efterretningsanalytikere på at bruge eller ikke bruge ACH på det samme problem. De konkluderede, at efterretningssamfundet bør overveje, under hvilke forhold ACH er nyttig, og undersøge alternativer (Dhami, Belton & Mandel, Applied Cognitive Psychology, 2019). En gennemgang af beslægtede eksperimenter rapporterer, at analytikere, der brugte ACH, undertiden tildelte sandsynligheder mindre sammenhængende end dem, der ikke gjorde, og sjældnere brugte basisrater (Karvetski, Mandel & Irwin, Judgment and Decision Making, 2020).

Kolleger, der udfordrer hinandens ræsonnementer ved en whiteboard, en kontrol i analyse af konkurrerende hypoteser

Det gør ikke ACH ubrugelig. Det betyder, at en matrice ikke erstatter dømmekraft. Efter min erfaring gør ACH sig fortjent til sin plads, når fire betingelser er opfyldt:

  • Hypoteserne er reelt forskellige, så beviserne kan skille dem ad.
  • Basisrater overvejes først: hvor ofte viser hver forklaring sig at være sand i situationer som denne?
  • En person uden for teamet udfordrer hypoteselisten, fordi den forklaring, ingen skrev ned, er den, der overrasker dig.
  • Milepælene overvåges faktisk, så analysen lever videre efter mødet.

Brugt på den måde er ACH mindre en lommeregner end en disciplin: den gør argumentationen synlig, så andre kan efterprøve den.

Hvor ACH passer ind

ACH hører til en familie af strukturerede analyseteknikker. Den fungerer godt sammen med:

  • Scenarieplanlægning (på engelsk), til spørgsmål om fremtiden frem for forklaringer af nutiden.
  • At evaluere en prognose (på engelsk), når du vurderer andres påstande.
  • Premortem, som antager, at en plan allerede er slået fejl, og spørger hvorfor.
  • En fremsynskultur (på engelsk), fordi ingen teknik hjælper, hvis organisationen ikke vil handle på et ubehageligt svar.

Ofte stillede spørgsmål

Hvad er analyse af konkurrerende hypoteser?

ACH er en struktureret analyseteknik, udviklet af CIA-analytikeren Richards Heuer. Den vurderer flere mulige forklaringer på én gang ved at prøve hvert bevis mod hver hypotese og foretrækker den hypotese, der har færrest beviser imod sig.

Hvem skabte ACH?

Richards J. Heuer Jr., mangeårig analytiker i CIA, udviklede ACH og beskrev den i sin bog Psychology of Intelligence Analysis fra 1999, udgivet af CIA’s Center for the Study of Intelligence.

Hvad er diagnosticitet i ACH?

Diagnosticitet er, hvor godt et bevis hjælper med at skelne mellem hypoteser. Beviser, der er forenelige med alle hypoteser, har lav diagnosticitet, uanset hvor stærkt de synes at støtte én af dem.

Fjerner ACH bekræftelsesbias?

Ikke i sig selv. Eksperimenter med efterretningsanalytikere har givet blandede resultater. ACH hjælper mest, når hypoteserne er forskellige, basisrater overvejes, og udenforstående udfordrer hypoteselisten.

Kan virksomheder bruge ACH?

Ja. ACH bruges i competitive intelligence, efterforskning, cybersikkerhed og strategi, overalt hvor et team skal vælge mellem konkurrerende forklaringer på ufuldstændige beviser.

Samarbejd med Competitive Futures

Vi bruger struktureret analyse, herunder ACH, i vores competitive intelligence-arbejde og vores udgivne efterretningsprodukter, og vi underviser i den på lederuddannelser og på vores videregående kursus i strategisk analyse. Hvis dit team står over for en beslutning, der afhænger af at læse ufuldstændige beviser rigtigt, så book en samtale på 20 minutter.

Mere analyse fra Competitive Futures

Litteratur

  • Dhami, M. K., Belton, I. K., & Mandel, D. R. (2019). The “analysis of competing hypotheses” in intelligence analysis. Applied Cognitive Psychology, 33(6), 1080–1090. doi.org/10.1002/acp.3550
  • Heuer, R. J., Jr. (1999). Psychology of Intelligence Analysis, ch. 8. Center for the Study of Intelligence, CIA. cia.gov
  • Karvetski, C. W., Mandel, D. R., & Irwin, D. (2020). Coherence of probability judgments from uncertain evidence: Does ACH help? Judgment and Decision Making, 15(6), 939–958.
  • Office of the Director of National Intelligence (2015, amended 2022). Intelligence Community Directive 203: Analytic Standards. odni.gov