Análisis de hipótesis contrapuestas

El análisis de hipótesis en competencia ( ACH ) es una metodología para evaluar múltiples hipótesis en competencia para datos observados. Fue desarrollada por Richards (Dick) J. Heuer, Jr. , un veterano de 45 años de la Agencia Central de Inteligencia , en la década de 1970 para uso de la Agencia. ^{[ 1 ]} El ACH es utilizado por analistas en diversos campos que realizan juicios que implican un alto riesgo de error de razonamiento. El ACH tiene como objetivo ayudar al analista a superar, o al menos minimizar, algunas de las limitaciones cognitivas que hacen que el análisis de inteligencia predictivo sea tan difícil de lograr. ^{[ 1 ]}

ACH supuso un avance en la metodología de análisis de inteligencia , pero inicialmente se describió en términos relativamente informales. El objetivo de investigadores, desarrolladores de herramientas y analistas en la industria, la academia y el gobierno sigue siendo obtener la mejor información disponible a partir de datos inciertos . Sus áreas de especialización incluyen la minería de datos , la psicología cognitiva y la visualización , la probabilidad y la estadística , entre otras. El razonamiento abductivo es un concepto anterior con similitudes a ACH.

Heuer describe el proceso ACH con considerable detalle en su libro Psicología del análisis de la inteligencia . ^{[ 1 ]} Consta de los siguientes pasos:

1. Hipótesis: El primer paso del proceso consiste en identificar todas las hipótesis potenciales, preferiblemente con la participación de un grupo de analistas con diferentes perspectivas para generar ideas sobre las posibilidades. Este proceso desalienta al analista a elegir una hipótesis "probable" y utilizar la evidencia para demostrar su veracidad. El sesgo cognitivo se minimiza al considerar todas las hipótesis posibles. ^{[ 1 ]}
2. Evidencia – A continuación, el analista enumera la evidencia y los argumentos (incluidas las suposiciones y las deducciones lógicas) a favor y en contra de cada hipótesis. ^{[ 1 ]}
3. Diagnóstico: Utilizando una matriz , el analista aplica la evidencia contra cada hipótesis en un intento de refutar tantas teorías como sea posible. Algunas evidencias tendrán mayor "capacidad diagnóstica" que otras; es decir, algunas serán más útiles para juzgar la probabilidad relativa de hipótesis alternativas. Este paso es el más importante, según Heuer. En lugar de examinar una hipótesis y toda la evidencia ("trabajando hacia abajo" en la matriz), se recomienda al analista considerar una evidencia a la vez y examinarla contra todas las hipótesis posibles ("trabajando hacia los lados" en la matriz). ^{[ 1 ]}
4. Refinamiento: El analista revisa los hallazgos, identifica cualquier laguna y recopila cualquier evidencia adicional necesaria para refutar la mayor cantidad posible de las hipótesis restantes. ^{[ 1 ]}
5. Inconsistencia: El analista busca entonces extraer conclusiones preliminares sobre la probabilidad relativa de cada hipótesis. Una menor consistencia implica una menor probabilidad. Se eliminan las hipótesis menos consistentes. Si bien la matriz genera un total matemático definitivo para cada hipótesis, el analista debe usar su criterio para llegar a la conclusión final. El resultado del análisis ACH no debe invalidar el criterio del analista.
6. Sensibilidad: El analista pone a prueba las conclusiones mediante un análisis de sensibilidad , que evalúa cómo se vería afectada la conclusión si las pruebas o argumentos clave fueran erróneos, engañosos o susceptibles de diferentes interpretaciones. Se verifica la validez de las pruebas clave y la coherencia de los argumentos importantes para asegurar la solidez de los pilares y fundamentos de la conclusión. ^{[ 1 ]}
7. Conclusiones y evaluación – Finalmente, el analista presenta al responsable de la toma de decisiones sus conclusiones, así como un resumen de las alternativas consideradas y los motivos de su rechazo. El analista también identifica hitos en el proceso que pueden servir como indicadores en análisis futuros. ^{[ 1 ]}

Algunos beneficios de realizar una matriz ACH son:

• Es auditable.
• Se cree ampliamente que ayuda a superar los sesgos cognitivos , aunque hay una falta de evidencia empírica sólida que respalde esta creencia. ^{[ 2 ]}
• Dado que el ACH exige que el analista construya una matriz, es posible rastrear la evidencia y las hipótesis . Esto permite que quien toma las decisiones u otros analistas vean la secuencia de reglas y datos que llevaron a la conclusión.

Entre las debilidades de realizar una matriz ACH se incluyen:

• El proceso para crear una cuenta ACH requiere mucho tiempo.
• La matriz ACH puede resultar problemática al analizar un proyecto complejo.
• Para un analista, puede resultar engorroso gestionar una base de datos extensa con múltiples pruebas.
• Las pruebas también presentan un problema si no son fiables.
• La evidencia utilizada en la matriz es estática y, por lo tanto, puede considerarse una instantánea en el tiempo.

Especialmente en inteligencia, tanto gubernamental como empresarial, los analistas siempre deben ser conscientes de que el oponente (o oponentes) es inteligente y puede estar generando información destinada a engañar . ^{[ 3 ] [ 4 ]} Dado que el engaño a menudo es el resultado de una trampa cognitiva, Elsaesser y Stech utilizan el reconocimiento de planes jerárquicos basados ​​en estados (véase razonamiento abductivo ) para generar explicaciones causales de las observaciones. Las hipótesis resultantes se convierten en una red bayesiana dinámica y se emplea el análisis del valor de la información para aislar supuestos implícitos en la evaluación de rutas en, o conclusiones de, hipótesis particulares. A medida que se observa evidencia en forma de observaciones de estados o supuestos, estos pueden convertirse en objeto de validación separada. Si se niega un supuesto o estado necesario, las hipótesis que dependen de él se rechazan. Esta es una forma de análisis de causa raíz .

Según los críticos constructivistas sociales, el ACH tampoco enfatiza lo suficiente (ni aborda como método) la naturaleza problemática de la formulación inicial de las hipótesis utilizadas para crear su matriz. Existe evidencia considerable, por ejemplo, de que además de cualquier sesgo burocrático, psicológico o político que pueda afectar la generación de hipótesis, también intervienen factores culturales y de identidad. Estos factores socialmente construidos pueden restringir o preseleccionar las hipótesis que finalmente se consideran y, posteriormente, reforzar el sesgo de confirmación en las seleccionadas. ^{[ 5 ]}

El filósofo y teórico de la argumentación Tim van Gelder ha formulado las siguientes críticas: ^{[ 6 ]}

• ACH exige que el analista realice demasiados juicios discretos, muchos de los cuales contribuyen poco o nada a discernir la mejor hipótesis.
• ACH malinterpreta la naturaleza de la relación entre los elementos de evidencia y las hipótesis al suponer que los elementos de evidencia son, por sí solos, consistentes o inconsistentes con las hipótesis.
• ACH trata el conjunto de hipótesis como "plano", es decir, una simple lista, y por lo tanto no puede relacionar la evidencia con las hipótesis en los niveles de abstracción apropiados.
• ACH no puede representar argumentación subordinada, es decir, la argumentación que se basa en una prueba.
• Las actividades de ACH a escalas realistas dejan a los analistas desorientados o confundidos.

Van Gelder propuso el mapeo de hipótesis (similar al mapeo de argumentos ) como una alternativa a ACH. ^{[ 7 ] [ 8 ]}

Existen varias herramientas de software en línea y descargables que ayudan a automatizar el proceso ACH. Estos programas generan un registro visual de la información y permiten al analista evaluarla.

• PARC ACH 2.0 ^{[ 17 ] [ 18 ]} fue desarrollado por Palo Alto Research Center (PARC) en colaboración con Richards J. Heuer, Jr. Es un programa ACH estándar que permite a los analistas ingresar evidencia y calificar su credibilidad y relevancia.
• El software Decision Command fue desarrollado por Willard Zangwill. ^{[ 19 ]}
• DECIDE fue desarrollado por la firma de investigación analítica SSS Research, Inc. ^{[ 15 ] [ 20 ]} DECIDE no solo permite a los analistas manipular ACH, sino que también proporciona múltiples productos de visualización. ^{[ 21 ]}
• El Análisis de Hipótesis Competitivas (ACH) es una implementación de ACH de código abierto . ^{[ 22 ]}
• La plantilla ACH ^{[ 23 ]} es una hoja de Excel que implementa la metodología de puntuación y ponderación de ACH, más específicamente el algoritmo de conteo de inconsistencias ponderadas.