El Good Judgment Project ( GJP ) es una organización dedicada a "aprovechar la sabiduría colectiva para pronosticar eventos mundiales". Fue cofundado por Philip E. Tetlock (autor de Superforecasting: The Art and Science of Prediction y Expert Political Judgment ), la científica de decisiones Barbara Mellers y Don Moore , todos profesores de la Universidad de Pensilvania . [ 1 ] [ 2 ] [ 3 ]
El proyecto comenzó como participante en el programa de Estimación Contingente Agregada (ACE) de la Actividad de Proyectos de Investigación Avanzada de Inteligencia (IARPA). [ 4 ] [ 5 ] Luego extendió su sabiduría colectiva a actividades comerciales, reclutando pronosticadores y agregando las predicciones de los más históricamente precisos entre ellos para pronosticar eventos futuros . [ 6 ] [ 7 ] Las predicciones se califican utilizando puntuaciones de Brier . [ 8 ] Los mejores pronosticadores en GJP son "aparentemente un 30% mejores que los oficiales de inteligencia con acceso a información clasificada real". [ 9 ]
Historia
El Proyecto Buen Juicio comenzó en julio de 2011 en colaboración con el Programa de Estimación Contingente Agregada (ACE) en IARPA (IARPA-ACE). [ 10 ] El primer concurso comenzó en septiembre de 2011. [ 11 ] GJP fue uno de los muchos participantes en el torneo IARPA-ACE, que planteó alrededor de 100 a 150 preguntas cada año sobre eventos geopolíticos. El equipo de investigación de GJP reunió a un gran número de aficionados talentosos (en lugar de expertos en temas geopolíticos), les dio tutoriales básicos sobre las mejores prácticas de pronóstico y cómo superar los sesgos cognitivos , y creó un algoritmo de agregación para combinar las predicciones individuales de los pronosticadores. [ 5 ] [ 12 ] GJP ganó ambas temporadas del concurso y fue entre un 35% y un 72% más preciso que cualquier otro equipo de investigación. [ 13 ] A partir del verano de 2013, GJP fue el único equipo de investigación que IARPA-ACE seguía financiando, y los participantes de GJP tuvieron acceso al Sistema Integrado de Alerta Temprana de Conflictos . [ 8 ]
Gente
Los colíderes del GJP incluyen a Philip Tetlock , Barbara Mellers y Don Moore . [ 1 ] El sitio web enumera un total de aproximadamente 30 miembros del equipo, incluidos los colíderes, así como David Budescu , Lyle Ungar , Jonathan Baron y el empresario de mercados de predicción Emile Servan-Schreiber. [ 14 ] El consejo asesor incluyó a Daniel Kahneman , Robert Jervis , J. Scott Armstrong , Michael Mauboussin , Carl Spetzler y Justin Wolfers . [ 15 ] El estudio empleó a varios miles de personas como pronosticadores voluntarios. [ 12 ] Utilizando pruebas de rasgos de personalidad, métodos de entrenamiento y estrategias, los investigadores del GJP pudieron seleccionar participantes de pronóstico con menos sesgo cognitivo que la persona promedio; a medida que continuaba el concurso de pronóstico, los investigadores pudieron seleccionar aún más a estos individuos en grupos de los llamados superpronosticadores . La última temporada del GJP reclutó a un total de 260 superpronosticadores.
Investigación
Se ha llevado a cabo una cantidad significativa de investigación basada en el Proyecto Buen Juicio por parte de las personas involucradas en él. [ 16 ] Los resultados muestran que aprovechar una combinación de estadística, psicología, capacitación y varios niveles de interacción entre pronosticadores individuales produjo consistentemente el mejor pronóstico durante varios años consecutivos. [ 12 ]
Buen Juicio Inc.
Una filial comercial del Proyecto Buen Juicio comenzó a operar en la web en julio de 2015 bajo el nombre de Good Judgment Inc. Sus servicios incluyen pronósticos sobre temas de interés general, pronósticos personalizados y capacitación en las técnicas de pronóstico de Good Judgment. [ 17 ] Desde septiembre de 2015, Good Judgment Inc. ha estado organizando un torneo público de pronósticos en el sitio Good Judgment Open. Al igual que el Proyecto Buen Juicio, Good Judgment Open incluye preguntas sobre eventos geopolíticos y financieros, aunque también incluye preguntas sobre política estadounidense, entretenimiento y deportes. [ 18 ] [ 19 ]
Cobertura mediática
El GJP ha sido discutido repetidamente en The Economist . [ 11 ] [ 20 ] [ 21 ] [ 22 ] El GJP también ha sido cubierto en The New York Times , [ 3 ] The Washington Post , [ 5 ] [ 23 ] [ 24 ] y Co.Exist. [ 25 ] NPR emitió un segmento en The Good Judgment Project con el título "Así que crees que eres más inteligente que un agente de la CIA", el 2 de abril de 2014. [ 9 ] El Financial Times publicó un artículo sobre el GJP el 5 de septiembre de 2014. [ 26 ] Washingtonian publicó un artículo que mencionaba el GJP el 8 de enero de 2015. [ 27 ] La BBC y The Washington Post publicaron artículos sobre el GJP respectivamente el 20, 21 y 29 de enero de 2015. [ 28 ] [ 29 ] [ 30 ]
El Almanaque de Menlo Park publicó una historia sobre el GJP el 29 de enero de 2015. [ 31 ] Un artículo sobre el GJP apareció en el portal del Philadelphia Inquirer , Philly.com, el 4 de febrero de 2015. [ 32 ] El libro Wiser: Getting Beyond Groupthink to Make Groups Smarter tiene una sección que detalla la participación del GJP en el torneo organizado por IARPA. [ 33 ] Psychology Today publicó en línea un breve artículo que resume el documento de Mellers, et al ., que resume los principales hallazgos del GJP. [ 34 ] [ 35 ]
El proyecto dio origen a un libro de 2015 de Tetlock y coescrito por Dan Gardner , Superforecasting - The Art and Science of Prediction , que divulga los principales hallazgos de la investigación realizada con los datos del GJP. [ 36 ] El coautor Gardner ya había publicado un libro en 2010, que citaba investigaciones previas de Tetlock que sembraron el esfuerzo del GJP. [ 37 ] Una reseña del libro en la edición impresa del 26 de septiembre de 2015 de The Economist analiza los conceptos principales. [ 38 ] Un artículo del Wall Street Journal lo describe como: "El libro más importante sobre toma de decisiones desde Pensar rápido, pensar despacio de Daniel Kahneman ". [ 39 ] La Harvard Business Review lo emparejó con el libro Cómo no equivocarse: El poder del pensamiento matemático de Jordan Ellenberg . [ 40 ] El 30 de septiembre de 2015, NPR emitió un episodio del programa Colin McEnroe Show centrado en el GJP y el libro Superforecasting ; los invitados al programa fueron Tetlock, el director de IARPA, Jason Matheny , y la superpronosticadora Elaine Rich. [ 41 ]
Véase también
- La sabiduría de la multitud
- Estimación contingente agregada
- Actividad de Proyectos de Investigación Avanzada de Inteligencia
- SciCast
Referencias
- ^ a b "Bienvenido al Proyecto Buen Juicio" . El Proyecto Buen Juicio . Consultado el 5 de mayo de 2014 .
- ^ "Quién es quién en el Proyecto Buen Juicio" . El Proyecto Buen Juicio. 27 de julio de 2011. Consultado el 5 de mayo de 2014 .
- ^ a b Brooks, David (21 de marzo de 2013). "Pronosticando a Fox" . New York Times . Recuperado el 5 de mayo de 2014 .
- ^ "El Proyecto" . El Proyecto del Buen Juicio. Archivado del original el 6 de mayo de 2014. Recuperado el 5 de mayo de 2014 .
- ^ a b c Horowitz, Michael (26 de noviembre de 2013). "Buen juicio al pronosticar asuntos internacionales (y una invitación para la temporada 3)" . Washington Post . Recuperado el 5 de mayo de 2014 .
- ^ "Acerca de Superforecasting | Pronósticos Precisos y Exactos sin Precedentes" . Buen Juicio . Consultado el 17 de febrero de 2022 .
- ^ Matthews, Dylan (16 de febrero de 2022). "¿Cómo podemos prevenir conflictos importantes como una guerra entre Rusia y Ucrania?" . Vox . Consultado el 17 de febrero de 2022 .
- ^ a b Dickenson, Matt (12 de noviembre de 2013). "Predicción y buen juicio: ¿Puede ICEWS informar los pronósticos?" . Heurística predictiva. Archivado del original el 18 de abril de 2014. Recuperado el 24 de mayo de 2014 .
- ^ a b Spiegel, Alix. "Así que crees que eres más inteligente que un agente de la CIA" . NPR.org . Recuperado el 18 de agosto de 2014 .
- ^ "La idea detrás del Proyecto Buen Juicio" . El Proyecto Buen Juicio. 27 de julio de 2011. Archivado del original el 6 de mayo de 2014. Recuperado el 5 de mayo de 2014 .
- ^ a b "Los peligros de la predicción: Aventuras en el análisis político" . The Economist . 2 de septiembre de 2011. Consultado el 6 de mayo de 2014 .
- ^ a b c Mellers, Barbara; Ungar, Lyle; Baron, Jonathan; Ramos, Jaime; Gurcay, Burcu; Fincher, Katrina; Scott, Sydney E.; Moore, Don; Atanasov, Pavel; Swift, Samuel A.; Murray, Terry; Stone, Eric; Tetlock, Philip E. (2014-05-01). " Estrategias psicológicas para ganar un torneo de pronóstico geopolítico" . Psychological Science . 25 (5): 1106– 1115. doi : 10.1177/0956797614524255 . ISSN 1467-9280 . PMID 24659192. S2CID 42143367 .
- ^ "La primera temporada de campeonato" . Buen juicio . Consultado el 17 de febrero de 2022 .
- ^ "Equipo" . El Proyecto Buen Juicio . Consultado el 5 de mayo de 2014 .
- ^ "Freakonomics" . Inscríbete en un torneo de predicciones . 4 de agosto de 2011.
- ^
- ^ Brody, Liz (1 de enero de 2022). "Conozca al equipo de élite de superpronosticadores que han convertido la predicción del futuro en una ciencia" . Entrepreneur .
- ^ Gossett, Stephen (6 de agosto de 2020). "Cómo los superpronosticadores del Good Judgment Project utilizan datos para hacer predicciones" . builtin.com . Consultado el 7 de junio de 2022 .
- ^ "Good Judgment® Open" . www.gjopen.com . Consultado el 17 de febrero de 2022 .
- ^ "Política monetaria: ¿Qué probabilidades hay de deflación?" . The Economist . 13 de septiembre de 2011 . Consultado el 6 de mayo de 2014 .
- ^ "Internacional: ¿Quiénes son buenos en pronósticos? Cómo distinguir a los mejores del resto" . The Economist . 18 de noviembre de 2013. Consultado el 6 de mayo de 2014 .
- ^ "Las mejores apuestas de los expertos" . The Economist . 10 de noviembre de 2021. Consultado el 7 de junio de 2022 .
- ^ Ignatius, David (1 de noviembre de 2013). "Más palabrería de la necesaria" . Washington Post . Consultado el 6 de mayo de 2014 .
- ^ Bender, Jeremy (3 de abril de 2014). "Un gran experimento revela que la gente común predice eventos mundiales mejor que los agentes de la CIA" . Business Insider . Consultado el 6 de mayo de 2014 .
- « La sorprendente precisión de las predicciones colaborativas sobre el futuro. ¿Sabes si Turquía tendrá una nueva constitución? Resulta que sí: un grupo de ciudadanos bien informados puede predecir eventos futuros con más frecuencia que cualquier experto en política exterior o analista de la CIA» . Co.exist. 21 de abril de 2014. Consultado el 6 de mayo de 2014 .
- ^ Harford, Tim (5 de septiembre de 2014). "Cómo ver el futuro" . Financial Times . ISSN 0307-1766 . Consultado el 5 de septiembre de 2014 .
- ^ Hamilton, Keegan (8 de enero de 2015). "Cómo las agencias estadounidenses están utilizando la web para sonsacarnos información" . Washingtonian . Archivado del original el 12 de enero de 2015. Recuperado el 24 de enero de 2015 .
- ^ Burton, Tara (2015-01-20). "¿Podrías ser un 'superpronosticador'?" . BBC Future . Consultado el 21 de enero de 2015 .
- ^ Jensen, Nathan (21 de enero de 2015). "Los expertos ven un Senado republicano y la autoridad de vía rápida para Obama como claves para nuevos acuerdos comerciales" . The Washington Post . ISSN 0190-8286 . Consultado el 21 de enero de 2015 .
- ^ Mellers, Barbara; Michael C. Horowitz (29 de enero de 2015). "¿Alguien hace predicciones geopolíticas precisas?" . The Washington Post . ISSN 0190-8286 . Consultado el 30 de enero de 2015 .
- ^ "Artículo destacado: Bob Sawyer de Woodside descubre su talento latente para la predicción meteorológica" . Consultado el 17 de marzo de 2015 .
- ^ Dribben, Melissa; Redactora del Inquirer (4 de febrero de 2015). "Adivinación: Las multitudes superan a los expertos" . Philly.com . Consultado el 6 de febrero de 2015 .
- ^ Sunstein, Cass R. ; Hastie, Reid (23 de diciembre de 2014). Wiser: Getting Beyond Groupthink to Make Groups Smarter . Harvard Business Review Press. ISBN 978-1-4221-2299-0.
- ^ "¿Quién predice mejor el futuro? (y cómo mejorar)" . Psychology Today . Consultado el 11 de julio de 2015 .
- ^ Mellers, Barbara; Stone, Eric; Murray, Terry; Minster, Angela; Rohrbaugh, Nick; Bishop, Michael; Chen, Eva; Baker, Joshua; Hou, Yuan; Horowitz, Michael; Ungar, Lyle; Tetlock, Philip (2015-05-01). "Identificación y cultivo de superpronosticadores como método para mejorar las predicciones probabilísticas" . Perspectives on Psychological Science . 10 (3): 267– 281. doi : 10.1177/1745691615577794 . ISSN 1745-6916 . PMID 25987508. S2CID 3118872 .
- ^ Tetlock, Philip E.; Gardner, Dan (29 de septiembre de 2015). Superforecasting: El arte y la ciencia de la predicción . Nueva York: Crown. ISBN 978-0-8041-3669-3.
- ^ Gardner, Dan (12 de octubre de 2010). Disparates sobre el futuro: por qué fallan las predicciones de los expertos y por qué, aun así, las creemos . McClelland & Stewart.
- ^ "Visión sin nubes" . The Economist . 26 de septiembre de 2015. ISSN 0013-0613 . Consultado el 24 de septiembre de 2015 .
- ^ Zweig, Jason. "¿Puedes ver el futuro? Probablemente mejor que los pronosticadores profesionales" . The Wall Street Journal . Consultado el 25 de septiembre de 2015. Creo
que "Superforecasting: The Art and Science of Prediction" de Philip Tetlock es el libro más importante sobre la toma de decisiones desde "Pensar rápido, pensar despacio" de Daniel Kahneman.
- ^ Frick, Walter. "Cuestionar la certeza" . Harvard Business Review . Consultado el 26 de septiembre de 2015 .
- ^ McEnroe, Colin; Wolf, Chion. "The Colin McEnroe Show" . WNPR. National Public Radio . Consultado el 1 de octubre de 2015 .
Enlaces externos
- Sitio web oficial
- Buen juicio abierto
- Investigación gubernamental
- Crowdsourcing
- Predicción
- Mercados de predicción