Analyse van concurrerende hypothesen (ACH): hoe u haar gebruikt, en wanneer ze faalt

Engelse versie (English version)
De analyse van concurrerende hypothesen (ACH, naar het Engelse Analysis of Competing Hypotheses) is een gestructureerde techniek om te beoordelen welke van meerdere verklaringen het best bij het bewijs past. In plaats van een favoriet antwoord te kiezen en daar steun voor te verzamelen, zet ACH alle redelijke hypothesen op een rij en toetst ze elk bewijsstuk tegelijk aan allemaal. Het antwoord dat overblijft, is het antwoord dat het bewijs niet kan uitsluiten, en dat is vaak niet het antwoord waarmee de zaal begon.
CIA-analist Richards Heuer ontwikkelde ACH en publiceerde haar in Psychology of Intelligence Analysis (1999), nog altijd een van de meest gedoceerde boeken over inlichtingenanalyse. Sindsdien heeft ACH zich verspreid van overheidsinlichtingendiensten naar competitive intelligence, onderzoeken, cyberbeveiliging en bedrijfsstrategie.
Ik gebruik ACH al het grootste deel van mijn loopbaan, in competitive intelligence voor bedrijven en in onze eigen gepubliceerde inlichtingenproducten. Deze pagina legt de methode uit, werkt een voorbeeld door en zet op een rij wat onderzoek zegt over wanneer ze helpt en wanneer niet.
In het kort
- ACH toetst bewijs tegelijk aan elke hypothese, niet alleen aan de favoriet.
- Ze zoekt bewijs dat weerlegt, niet bewijs dat steunt. Eén stevige tegenstrijdigheid kan een hypothese uitschakelen; een stapel passend bewijs kan er geen enkele bewijzen.
- Diagnostisch bewijs is wat telt. Bewijs dat bij elke hypothese past, vertelt u vrijwel niets.
- De uitkomst is een rangorde plus een lijst van signalen om te volgen: welke verklaringen overeind blijven, en welke toekomstige tekenen het antwoord zouden veranderen.
- Het is geen toverij. Experimenten tonen dat ACH het denken kan ordenen, maar vertekening niet vanzelf wegneemt. Ze werkt het best binnen een gedisciplineerd proces.
Waarom ACH bestaat: het probleem met intuïtieve analyse
De natuurlijke manier om een vraag te analyseren is vroeg een standpunt innemen en daarna bewijs ervoor verzamelen. Dat voelt als grondigheid. Eigenlijk is het pleiten, en zo praten slimme mensen zichzelf zelfverzekerde fouten aan.
Het probleem is bevestigingsbias. Het meeste bewijs past bij meer dan één verklaring, dus een vastberaden analist vindt altijd steun voor het antwoord dat hij al prettig vindt. Heuers inzicht was dat de remedie procedureel moet zijn. Weten dat bias bestaat, beschermt u er niet tegen; een structuur die u dwingt de alternatieven te overwegen wel. Zie de gids over cognitieve bias (in het Engels) voor een breder overzicht.
De Amerikaanse inlichtingengemeenschap heeft dat idee sindsdien in haar formele normen opgenomen. ICD 203, de richtlijn die de analysenormen voor de hele gemeenschap vastlegt, verplicht analisten om alternatieven mee te wegen (ODNI, ICD 203).
De acht stappen van ACH
Heuer beschreef ACH als een procedure in acht stappen (Heuer, hfst. 8). Eenvoudig gezegd:
- Som de hypothesen op. Brainstorm over elke redelijke verklaring, bij voorkeur met mensen die het probleem anders zien. Neem ook de verklaringen op die u niet bevallen.
- Som het bewijs en de argumenten op. Neem feiten, berichten, aannames en logische argumenten op, en let op wat er ontbreekt evenzeer als op wat er is.
- Bouw de matrix. Hypothesen bovenaan, bewijs aan de zijkant. Vraag voor elke cel of dat bewijsstuk consistent, inconsistent of irrelevant is voor die hypothese.
- Verfijn de matrix. Herformuleer of voeg hypothesen samen, en schrap bewijs dat niet helpt de hypothesen te onderscheiden.
- Trek voorlopige conclusies. Loop elke hypothesekolom na op tegenstrijdigheden. De waarschijnlijkste hypothese is meestal die met het minste bewijs tegen zich, niet die met het meeste bewijs vóór.
- Toets de gevoeligheid. Vraag op welke paar bewijsstukken uw conclusie werkelijk rust, en wat er gebeurt als een daarvan onjuist, misleidend of bewust geplaatst is.
- Rapporteer de conclusies, inclusief de relatieve waarschijnlijkheid van elke hypothese, niet alleen van de winnaar.
- Stel mijlpalen vast. Benoem de toekomstige waarnemingen die u zouden vertellen dat de gebeurtenissen een andere kant op gaan.

Het kernidee: diagnosticiteit
Het nuttigste begrip in ACH is diagnosticiteit. Bewijs is diagnostisch als het helpt de hypothesen van elkaar te onderscheiden. Bewijs dat met elke hypothese consistent is, kan aanvoelen als sterke steun voor uw favoriet, maar helpt u niet kiezen.
Dat keert om hoe de meeste organisaties informatie lezen. Bestuurders wegen bewijs vaak naar hoe opvallend, recent of gezaghebbend het is. ACH stelt een andere vraag: maakt dit bewijsstuk een hypothese minder waarschijnlijk? Zo niet, leg het dan opzij, hoe indrukwekkend het ook lijkt.
Een uitgewerkt voorbeeld
Stel dat een concurrent de afgelopen twee maanden een tiental vacatures voor batterij-ingenieurs heeft geplaatst. De directie wil weten wat dat betekent. Vier hypothesen:
- H1: de concurrent bouwt een eigen batterijproductlijn op.
- H2: hij haalt een uitbesteed onderdeel in huis om kosten te besparen.
- H3: hij bereidt de overname van een batterijstart-up voor en werft personeel vooruitlopend op de deal.
- H4: het is gewoon personeelsverloop en de vacatures betekenen weinig.
Dan het bewijs:
- De vacatures zelf passen bij alle vier de hypothesen. Ze maken geen enkel onderscheid.
- De functies liggen in packassemblage en leverancierskwaliteit, niet in onderzoek naar celchemie. Dat is inconsistent met H1, want een nieuwe batterijlijn zou chemici nodig hebben, en met H4, want een geconcentreerde golf in één functie is geen gewoon verloop. Het past bij H2.
- De belangrijkste leverancier van de concurrent heeft onlangs zijn prijzen verhoogd. Consistent met H2; over de andere zegt het niets.
- Er zijn geen financieringsactiviteiten of overnamegeruchten te vinden in openbare stukken of de vakpers. Dat is inconsistent met H3.
Het opvallendste bewijs, de golf vacatures, blijkt het minst diagnostisch. De stille details, welke functies en wat er verder gebeurde, doen het werk. H2 blijft zonder tegenstrijdigheden overeind. De mijlpalen om te volgen: wijzigingen in leverancierscontracten, fabrieksvergunningen en elke nieuwe financiering die H3 nieuw leven zou inblazen.
Wat onderzoek zegt over ACH
ACH wordt veel gedoceerd, maar het bewijs dat ze het oordeel verbetert, is gemengd.
In een experiment uit 2019 verdeelden Mandeep Dhami, Ian Belton en David Mandel 50 inlichtingenanalisten willekeurig over een groep die ACH gebruikte en een groep die dat niet deed, bij hetzelfde vraagstuk. Ze concludeerden dat de inlichtingengemeenschap zou moeten nagaan onder welke voorwaarden ACH nuttig is en alternatieven zou moeten verkennen (Dhami, Belton & Mandel, Applied Cognitive Psychology, 2019). Een overzicht van verwante experimenten meldt dat analisten die ACH gebruikten soms minder samenhangend kansen toekenden dan analisten die dat niet deden, en minder vaak basisfrequenties gebruikten (Karvetski, Mandel & Irwin, Judgment and Decision Making, 2020).

Dat maakt ACH niet nutteloos. Het betekent dat een matrix geen vervanging is voor oordeelsvermogen. In mijn ervaring verdient ACH zich terug als aan vier voorwaarden is voldaan:
- De hypothesen zijn echt verschillend, zodat bewijs ze kan scheiden.
- Basisfrequenties worden eerst bekeken: hoe vaak blijkt elke verklaring in vergelijkbare situaties te kloppen?
- Iemand van buiten het team betwist de lijst met hypothesen, want de verklaring die niemand opschreef, is de verklaring die u verrast.
- De mijlpalen worden echt gevolgd, zodat de analyse na de vergadering blijft leven.
Zo gebruikt is ACH minder een rekenmachine dan een discipline: ze maakt de redenering zichtbaar, zodat anderen die kunnen controleren.
Waar ACH past
ACH hoort bij een familie van gestructureerde analysetechnieken. Ze werkt goed naast:
- Scenarioplanning (in het Engels), voor vragen over de toekomst in plaats van verklaringen van het heden.
- Het beoordelen van een voorspelling (in het Engels), wanneer u de beweringen van een ander beoordeelt.
- De premortem, die aanneemt dat een plan al mislukt is en vraagt waarom.
- Een cultuur van toekomstverkenning (in het Engels), want geen techniek helpt als de organisatie niet handelt op een onwelkom antwoord.
Veelgestelde vragen
Wat is de analyse van concurrerende hypothesen?
ACH is een gestructureerde analysetechniek ontwikkeld door CIA-analist Richards Heuer. Ze beoordeelt meerdere mogelijke verklaringen tegelijk door elk bewijsstuk aan elke hypothese te toetsen, en geeft de voorkeur aan de hypothese met het minste bewijs tegen zich.
Wie heeft ACH bedacht?
Richards J. Heuer Jr., jarenlang analist bij de CIA, ontwikkelde ACH en beschreef haar in zijn boek Psychology of Intelligence Analysis uit 1999, uitgegeven door het Center for the Study of Intelligence van de CIA.
Wat is diagnosticiteit in ACH?
Diagnosticiteit is de mate waarin een bewijsstuk helpt hypothesen van elkaar te onderscheiden. Bewijs dat met elke hypothese consistent is, heeft een lage diagnosticiteit, hoe sterk het ook een ervan lijkt te steunen.
Neemt ACH bevestigingsbias weg?
Niet op zichzelf. Experimenten met inlichtingenanalisten leverden gemengde resultaten op. ACH helpt het meest als de hypothesen verschillend zijn, basisfrequenties worden meegewogen en buitenstaanders de lijst met hypothesen betwisten.
Kunnen bedrijven ACH gebruiken?
Ja. ACH wordt gebruikt in competitive intelligence, onderzoeken, cyberbeveiliging en strategie: overal waar een team moet kiezen tussen concurrerende verklaringen van onvolledig bewijs.
Werken met Competitive Futures
Wij gebruiken gestructureerde analyse, waaronder ACH, in ons competitive-intelligencewerk en onze gepubliceerde inlichtingenproducten, en we doceren haar in managementopleidingen en onze gevorderde cursus strategische analyse. Staat uw team voor een beslissing die afhangt van het juist lezen van onvolledig bewijs, vraag dan een gesprek van 20 minuten aan.
Meer analyses van Competitive Futures
- Cognitieve bias: een gids voor leiders die onder onzekerheid moeten beslissen (in het Engels)
- Hoe bouw je een cultuur van toekomstverkenning (in het Engels)
- Hoe beoordeel je een voorspelling (in het Engels)
- Scenarioplanning (in het Engels)
- Hoe je strategische denkvalkuilen vermijdt (in het Engels)
Literatuur
- Dhami, M. K., Belton, I. K., & Mandel, D. R. (2019). The “analysis of competing hypotheses” in intelligence analysis. Applied Cognitive Psychology, 33(6), 1080–1090. doi.org/10.1002/acp.3550
- Heuer, R. J., Jr. (1999). Psychology of Intelligence Analysis, ch. 8. Center for the Study of Intelligence, CIA. cia.gov
- Karvetski, C. W., Mandel, D. R., & Irwin, D. (2020). Coherence of probability judgments from uncertain evidence: Does ACH help? Judgment and Decision Making, 15(6), 939–958.
- Office of the Director of National Intelligence (2015, amended 2022). Intelligence Community Directive 203: Analytic Standards. odni.gov
Dit artikel maakt deel uit van onze gids Intelligence Analysis Tradecraft (in het Engels).