Articulo de referencia

Experimento de campo

Los experimentos de campo son experimentos realizados fuera de entornos de laboratorio . Se diferencian de otros en que se llevan a cabo en entornos del mundo real, a menudo de ...

Los experimentos de campo son experimentos realizados fuera de entornos de laboratorio . Se diferencian de otros en que se llevan a cabo en entornos del mundo real, a menudo de forma discreta, y controlan no solo el grupo de sujetos, sino también la selección y la transparencia, como lo definen líderes como John A. List . Esto contrasta con los experimentos de laboratorio, que imponen el control científico al probar una hipótesis en el entorno artificial y altamente controlado de un laboratorio. Los experimentos de campo también presentan algunas diferencias contextuales con respecto a los experimentos naturales y los cuasiexperimentos. [ 1 ] Mientras que los experimentos naturales dependen de una fuerza externa (por ejemplo, un gobierno, una organización sin fines de lucro, etc.) que controla la asignación aleatoria del tratamiento y su implementación, los experimentos de campo requieren que los investigadores mantengan el control sobre la aleatorización y la implementación. Los cuasiexperimentos ocurren cuando los tratamientos se administran como si fueran aleatorios (por ejemplo, distritos del Congreso de los EE. UU. donde los candidatos ganan por márgenes estrechos, [ 2 ] patrones climáticos, desastres naturales, etc.).

En un experimento de campo, los investigadores asignan aleatoriamente a los sujetos (u otras unidades de muestreo) a grupos de tratamiento o de control para comprobar posibles relaciones causales . La asignación aleatoria ayuda a establecer la comparabilidad entre ambos grupos, de modo que cualquier diferencia que surja tras la administración del tratamiento refleje de forma plausible la influencia del mismo, en lugar de diferencias preexistentes entre los grupos.

Los experimentos de campo abarcan una amplia gama de diseños experimentales, cada uno con distintos grados de generalidad. Algunos criterios de generalidad (por ejemplo, la autenticidad de los tratamientos, los participantes, los contextos y las medidas de resultado) se refieren a las similitudes contextuales entre los sujetos de la muestra experimental y el resto de la población. Su uso se está extendiendo en las ciencias sociales para estudiar los efectos de las intervenciones políticas en ámbitos como la salud, la educación, la delincuencia, el bienestar social y la política.

Características

Bajo asignación aleatoria, los resultados de los experimentos de campo reflejan el mundo real porque los sujetos se asignan a grupos en función de probabilidades no deterministas. [ 3 ] Otros dos supuestos fundamentales sustentan la capacidad del investigador para recopilar resultados potenciales imparciales: la excluibilidad y la no interferencia. [ 4 ] [ 5 ] El supuesto de excluibilidad establece que el único agente causal relevante es la recepción del tratamiento. Las asimetrías en la asignación, administración o medición de los grupos de tratamiento y control violan este supuesto. El supuesto de no interferencia, o Supuesto de Valor de Tratamiento Unitario Estable (SUTVA), indica que el valor del resultado depende solo de si el sujeto recibe o no el tratamiento y no de si otros sujetos reciben o no el tratamiento. Cuando se cumplen estos tres supuestos fundamentales, es más probable que los investigadores proporcionen estimaciones imparciales a través de experimentos de campo.

Tras diseñar el experimento de campo y recopilar los datos, los investigadores pueden utilizar pruebas de inferencia estadística para determinar la magnitud y la intensidad del efecto de la intervención en los sujetos. Los experimentos de campo permiten a los investigadores recopilar datos de diversa índole y en diferentes cantidades. Por ejemplo, un investigador podría diseñar un experimento que utilice información previa y posterior a la intervención, aplicando un método de inferencia estadística adecuado para determinar si una intervención tiene algún efecto en los resultados individuales.

Usos prácticos

Los experimentos de campo ofrecen a los investigadores una forma de probar teorías y responder preguntas con mayor validez externa, ya que simulan sucesos del mundo real. [ 6 ] En comparación con las encuestas y los experimentos de laboratorio, una ventaja de los experimentos de campo es que permiten evaluar a las personas sin que sepan que participan en un estudio, lo que podría influir en sus respuestas (conocido como el " Efecto Hawthorne "). Por ejemplo, los investigadores utilizaron un experimento de campo publicando diferentes tipos de anuncios de empleo para evaluar las preferencias de las personas por trabajos estables frente a trabajos estimulantes, como una forma de comprobar la validez de las respuestas de las personas a las medidas de la encuesta. [ 7 ]

Some researchers argue that field experiments are a better guard against potential bias and biased estimators. Field experiments can act as benchmarks for comparing observational data to experimental results. Using field experiments as benchmarks can help determine levels of bias in observational studies, and, since researchers often develop a hypothesis from an a priori judgment, benchmarks can help to add credibility to a study.[8] While some argue that covariate adjustment or matching designs might work just as well in eliminating bias, field experiments can increase certainty[9] by displacing omitted variable bias because they better allocate observed and unobserved factors.[10]

Researchers can utilize machine learning methods to simulate, reweight, and generalize experimental data.[11] This increases the speed and efficiency of gathering experimental results and reduces the costs of implementing the experiment. Another cutting-edge technique in field experiments is the use of the multi armed bandit design,[12] including similar adaptive designs on experiments with variable outcomes and variable treatments over time.[13]

Limitations

There are limitations of and arguments against using field experiments in place of other research designs (e.g. lab experiments, survey experiments, observational studies, etc.). Given that field experiments necessarily take place in a specific geographic and political setting, there is a concern about extrapolating outcomes to formulate a general theory regarding the population of interest. However, researchers have begun to find strategies to effectively generalize causal effects outside of the sample by comparing the environments of the treated population and external population, accessing information from larger sample size, and accounting and modeling for treatment effects heterogeneity within the sample.[14] Others have used covariate blocking techniques to generalize from field experiment populations to external populations.[15]

Los problemas de incumplimiento que afectan a los experimentos de campo (tanto el incumplimiento unilateral como el bilateral) [ 16 ] [ 17 ] pueden ocurrir cuando los sujetos asignados a un grupo determinado nunca reciben la intervención que se les asignó. Otros problemas en la recopilación de datos incluyen la deserción (cuando los sujetos tratados no proporcionan datos de resultados), lo que, bajo ciertas condiciones, sesgará los datos recopilados. Estos problemas pueden llevar a un análisis de datos impreciso; sin embargo, los investigadores que utilizan experimentos de campo pueden emplear métodos estadísticos para calcular información útil incluso cuando se presentan estas dificultades. [ 17 ]

El uso de experimentos de campo también puede generar inquietudes sobre la interferencia [ 18 ] entre sujetos. Cuando un sujeto o grupo tratado afecta los resultados del grupo no tratado (a través de condiciones como desplazamiento, comunicación, contagio, etc.), es posible que los grupos no tratados no tengan un resultado que sea el verdadero resultado no tratado. Un subconjunto de la interferencia es el efecto de contagio, que ocurre cuando el tratamiento de los grupos tratados afecta a los grupos no tratados vecinos.

Los experimentos de campo pueden ser costosos, requerir mucho tiempo para su realización, ser difíciles de replicar y estar plagados de problemas éticos. Los sujetos o poblaciones podrían socavar el proceso de implementación si existe una percepción de injusticia en la selección del tratamiento (por ejemplo, en los experimentos de " impuesto negativo sobre la renta ", las comunidades podrían presionar para que su comunidad reciba una transferencia de efectivo, de modo que la asignación no sea puramente aleatoria). Existen limitaciones para obtener formularios de consentimiento de todos los sujetos. Los compañeros que administran las intervenciones o recopilan datos podrían contaminar el esquema de aleatorización. Por lo tanto, los datos resultantes podrían ser más variados: mayor desviación estándar , menor precisión y exactitud , etc. Esto lleva al uso de tamaños de muestra más grandes para las pruebas de campo. Sin embargo, otros argumentan que, aunque la replicabilidad es difícil, si los resultados del experimento son importantes, entonces hay una mayor probabilidad de que el experimento se replique. Además, los experimentos de campo pueden adoptar un diseño de " cuña escalonada " que eventualmente dará a toda la muestra acceso a la intervención en diferentes cronogramas. [ 19 ] Los investigadores también pueden diseñar un experimento de campo ciego para eliminar las posibilidades de manipulación.

Ejemplos

The history of experiments in the lab and the field has left longstanding impacts in the physical, natural, and life sciences. Modern use field experiments has roots in the 1700s, when James Lind utilized a controlled field experiment to identify a treatment for scurvy.[20]

Other categorical examples of sciences that use field experiments include:

See also

References

  1. Meyer, B. D. (1995). "Natural and quasi-experiments in economics"(PDF). Journal of Business & Economic Statistics. 13 (2): 151–161. doi:10.2307/1392369. JSTOR 1392369.
  2. Lee, DS; Moretti, E.; Butler, MJ (2004). "¿Los votantes influyen o eligen las políticas? Evidencia de la Cámara de Representantes de EE. UU." The Quarterly Journal of Economics . 119 (3): 807– 859. doi : 10.1162/0033553041502153 . JSTOR 25098703 . 
  3. Rubin, Donald B. (2005). "Inferencia causal utilizando resultados potenciales". Journal of the American Statistical Association . 100 (469): 322– 331. doi : 10.1198/016214504000001880 . S2CID 842793 . 
  4. Nyman, Pär (2017). "El puerta a puerta en las elecciones europeas: evidencia de un experimento de campo sueco" . Estudios Electorales . 45 : 110–118 . doi : 10.1016/j.electstud.2016.12.002 .
  5. Broockman, David E.; Kalla, Joshua L.; Sekhon, Jasjeet S. (2017). "El diseño de experimentos de campo con resultados de encuestas: un marco para seleccionar diseños más eficientes, robustos y éticos" . Análisis político . 25 (4): 435– 464. doi : 10.1017/pan.2017.27 . S2CID 233321039 . 
  6. Duflo, Esther (2006). Experimentos de campo en economía del desarrollo (Informe). Instituto Tecnológico de Massachusetts. Archivado del original el 6 de marzo de 2012. Recuperado el 12 de marzo de 2010 .
  7. Harati, Hamidreza; Talhelm, Thomas (1 de julio de 2023). "Las culturas en entornos con escasez de agua están más orientadas a largo plazo" . Psychological Science . 34 (7): 754–770 . doi : 10.1177/09567976231172500 . ISSN 0956-7976 . PMID 37227787 .  
  8. Harrison, GW; List, JA (2004). "Experimentos de campo". Journal of Economic Literature . 42 (4): 1009– 1055. doi : 10.1257/0022051043004577 . JSTOR 3594915 . 
  9. LaLonde, RJ (1986). "Evaluación de las evaluaciones econométricas de programas de capacitación con datos experimentales". The American Economic Review . 76 (4): 604– 620. JSTOR 1806062 . 
  10. Gordon, Brett R.; Zettelmeyer, Florian; Bhargava, Neha; Chapsky, Dan (2017). "Una comparación de enfoques para la medición publicitaria: evidencia de grandes experimentos de campo en Facebook". Marketing Science . doi : 10.2139/ssrn.3033144 . S2CID 197733986 . 
  11. Athey, Susan ; Imbens, Guido (2016). "Particionamiento recursivo para efectos causales heterogéneos: Tabla 1" . Actas de la Academia Nacional de Ciencias . 113 ( 27): 7353–7360 . doi : 10.1073/pnas.1510489113 . PMC 4941430. PMID 27382149 .  
  12. Scott, Steven L. (2010). "Una mirada bayesiana moderna al problema del bandido multi-brazo". Applied Stochastic Models in Business and Industry . 26 (6): 639– 658. doi : 10.1002/asmb.874 .
  13. Raj, V.; Kalyani, S. (2017). "Domando bandidos no estacionarios: un enfoque bayesiano". arXiv : 1707.09727 [ stat.ML ].
  14. Dehejia, R.; Pop-Eleches, C.; Samii, C. (2015). De lo local a lo global: Validez externa en un experimento natural de fertilidad (PDF) (Informe). Oficina Nacional de Investigación Económica. w21459.
  15. Egami, Naoki; Hartman, Erin (19 de julio de 2018). "Selección de covariables para generalizar resultados experimentales" (PDF) . Princeton.edu . Archivado del original (PDF) el 10 de julio de 2020. Recuperado el 31 de diciembre de 2018 .
  16. Blackwell, Matthew (2017). "Métodos de variables instrumentales para efectos condicionales e interacción causal en experimentos de movilización de votantes" . Journal of the American Statistical Association . 112 (518): 590– 599. doi : 10.1080/01621459.2016.1246363 . S2CID 55878137 . 
  17. 1 2 Aronow, Peter M.; Carnegie, Allison (2013). "Más allá de LATE: Estimación del efecto promedio del tratamiento con una variable instrumental". Análisis político . 21 (4): 492– 506. doi : 10.1093/pan/mpt013 .
  18. Aronow, PM; Samii, C. (2017). "Estimación de los efectos causales promedio bajo interferencia general, con aplicación a un experimento de red social". The Annals of Applied Statistics . 11 (4): 1912– 1947. arXiv : 1305.6156 . doi : 10.1214/16-AOAS1005 . S2CID 26963450 . 
  19. Woertman, W.; de Hoop, E.; Moerbeek, M.; Zuidema, SU; Gerritsen, DL; Teerenstra, S. (2013). "Los diseños de cuña escalonada podrían reducir el tamaño de muestra requerido en ensayos aleatorizados por conglomerados" . Journal of Clinical Epidemiology . 66 (7): 752– 758. doi : 10.1016/j.jclinepi.2013.01.009 . hdl : 2066/117688 . PMID 23523551 . 
  20. Tröhler, U. (2005). "Lind y escorbuto: 1747 a 1795" . Journal of the Royal Society of Medicine . 98 (11): 519– 522. doi : 10.1177/014107680509801120 . PMC 1276007. PMID 16260808 .  
  21. Bertrand, Marianne; Mullainathan, Sendhil (2004). "¿Son Emily y Greg más empleables que Lakisha y Jamal? Un experimento de campo sobre discriminación en el mercado laboral" (PDF) . American Economic Review . 94 (4): 991– 1013. doi : 10.1257/0002828042002561 .
  22. Gneezy, Uri; List, John A (2006). "Poniendo en práctica la economía del comportamiento: Pruebas de intercambio de regalos en los mercados laborales mediante experimentos de campo" (PDF) . Econometrica . 74 (5): 1365– 1384. doi : 10.1111/j.1468-0262.2006.00707.x .
  23. Ahmed, Ali M; Hammarstedt, Mats (2008). "Discriminación en el mercado de alquiler de viviendas: un experimento de campo en Internet". Journal of Urban Economics . 64 (2): 362– 372. doi : 10.1016/j.jue.2008.02.004 .
  24. Edelman, Benjamin; Luca, Michael; Svirsky, Dan (2017). "Discriminación racial en la economía colaborativa: evidencia de un experimento de campo" . American Economic Journal: Applied Economics . 9 (2): 1– 22. doi : 10.1257/app.20160213 .
  25. Pager, Devah; Shepherd, Hana (2008). "La sociología de la discriminación: discriminación racial en el empleo, la vivienda, el crédito y los mercados de consumo" . Annual Review of Sociology . 34 : 181–209 . doi : 10.1146/annurev.soc.33.040406.131740 . PMC 2915460. PMID 20689680 .  
  26. Nesseler, Cornel; Carlos, Gomez-Gonzalez; Dietl, Helmut (2019). "¿Qué hay en un nombre? Midiendo el acceso a actividades sociales con un experimento de campo" . Palgrave Communications . 5 160: 1– 7. doi : 10.1057/s41599-019-0372-0 . hdl : 11250/2635691 .
  27. Ashraf, Nava; Berry, James; Shapiro, Jesse M (2010). "¿Pueden los precios más altos estimular el uso de productos? Evidencia de un experimento de campo en Zambia" (PDF) . American Economic Review . 100 (5): 2383– 2413. doi : 10.1257/aer.100.5.2383 . S2CID 6392533 . 
  28. Karlan, Dean; List, John A (2007). "¿Importa el precio en las donaciones caritativas? Evidencia de un experimento de campo natural a gran escala" (PDF) . American Economic Review . 97 (5): 1774– 1793. doi : 10.1257/aer.97.5.1774 . S2CID 10041821 . 
  29. Fryer Jr, Roland G (2014). "Incorporación de las mejores prácticas de las escuelas chárter en las escuelas públicas tradicionales: evidencia de experimentos de campo". The Quarterly Journal of Economics . 129 (3): 1355– 1407. doi : 10.1093/qje/qju011 .
  30. Field, Erica; Pande, Rohini (2008). "Frecuencia de reembolso e incumplimiento en microfinanzas: evidencia de la India". Journal of the European Economic Association . 6 ( 2– 3): 501– 509. doi : 10.1162/JEEA.2008.6.2-3.501 .
  31. Cialdini, Robert B.; Vincent, Joyce E.; Lewis, Stephen K.; Catalan, Jose; Wheeler, Diane; Darby, Betty Lee (February 1975). "Reciprocal concessions procedure for inducing compliance: The door-in-the-face technique". Journal of Personality and Social Psychology. 31 (2): 206–215. doi:10.1037/h0076284. ISSN 1939-1315.
  32. Fisher, R.A. (1937). The Design of Experiments(PDF). Oliver and Boyd Ltd.
  33. Gosnell, Harold F. (1926). "An Experiment in the Stimulation of Voting". American Political Science Review. 20 (4): 869–874. doi:10.1017/S0003055400110524.
  34. Grodwohl, Jean-Baptiste; Porto, Franco; El-Hani, Charbel N. (2018-07-31). "The instability of field experiments: building an experimental research tradition on the rocky seashores (1950–1985)". History and Philosophy of the Life Sciences. 40 (3): 45. doi:10.1007/s40656-018-0209-y. ISSN 1742-6316. PMID 30066110. S2CID 51889466.