Articulo de referencia

experimentos basados ​​en la web

Un experimento basado en la web o experimento basado en Internet es un experimento que se lleva a cabo a través de Internet . En tales experimentos, Internet es o bien "un medio...

Un experimento basado en la web o experimento basado en Internet es un experimento que se lleva a cabo a través de Internet . En tales experimentos, Internet es o bien "un medio a través del cual se pueden obtener muestras más grandes y diversas con costos administrativos y financieros reducidos" o bien "un campo de investigación en ciencias sociales por derecho propio". [ 1 ] La psicología y los estudios de Internet son probablemente las disciplinas que más han utilizado estos experimentos, aunque otras disciplinas, como la ciencia política y la economía, también los utilizan. Dentro de la psicología, la mayoría de los experimentos basados ​​en la web se realizan en las áreas de psicología cognitiva y psicología social . [ 2 ] [ 3 ] Esta forma de configuración experimental se ha vuelto cada vez más popular porque los investigadores pueden recopilar grandes cantidades de datos de forma económica desde una gama más amplia de lugares y personas. Un experimento basado en la web es un tipo de método de investigación en línea . Los experimentos basados ​​en la web se han generalizado significativamente desde la pandemia de COVID-19, ya que los investigadores no han podido realizar experimentos en laboratorios. [ 4 ]

Introducción

Los experimentos son una parte integral de la investigación; sin embargo, su integración con Internet ha sido gradual. Existen tres categorías principales de experimentos :

  • Los experimentos controlados, realizados en un entorno de laboratorio, intentan controlar todas las variables para luego analizar un único efecto.
  • Los experimentos naturales, realizados después de un evento a gran escala que fue prohibitivamente difícil o imposible de controlar, recopilan tantas variables como sea posible y luego establecen correlaciones.
  • Los experimentos de campo, observados en un entorno natural donde se pueden aplicar menos controles, tienen la ventaja de una mayor validez externa.

La adaptación de cada tipo de experimento al entorno en línea se enfrenta a ciertos obstáculos.

Beneficios

Los experimentos basados ​​en la web son significativamente menos costosos, lo que potencialmente permite al investigador:

  • Llegar a muestras más diversas, así como a subpoblaciones raras o específicas [ 5 ].
  • Realizar experimentos más rápidamente [ 5 ]
  • Reclutar grupos de sujetos más grandes que proporcionen mayor potencia estadística [ 6 ] [ 7 ]
  • Realizar experimentos sociales interculturales en tiempo real [ 8 ]

Estos beneficios pueden traducirse en una mayor validez externa y generalización del estudio. Por ejemplo, en los experimentos en línea se depende menos de los datos recopilados de poblaciones de estudiantes universitarios occidentales, que suelen ser los sujetos de investigación por defecto en las disciplinas de las ciencias sociales. [ 9 ] Debido a que los participantes permanecen en sus hogares u oficinas mientras participan en el experimento, los investigadores también han argumentado que dichos experimentos tienen una mayor validez ecológica . [ 5 ]

Críticas y limitaciones

Los experimentos basados ​​en la web pueden tener controles experimentales más débiles en comparación con los experimentos de laboratorio , y pueden enfrentar mayores dificultades para desarrollar procedimientos que garanticen la fiabilidad y la validez interna . [ 10 ] Los experimentos naturales y de campo en línea también pueden enfrentar desafíos para generalizar los hallazgos más allá del contexto en línea en el que se realizaron. Algunas dificultades potenciales que enfrentan los experimentos basados ​​en la web incluyen:

  • Dificultad para verificar la identidad de los sujetos que participan en el experimento.
  • Las instrucciones experimentales se ignoraron o se leyeron con demasiada negligencia, lo que dio lugar a datos de menor calidad [ 11 ].
  • Los tiempos de decisión más cortos de los participantes en línea activan procesos de razonamiento instintivos y emocionales en lugar de cognitivos y racionales, lo que podría hacer que los sujetos tomen decisiones más prosociales en promedio [ 1 ] [ 12 ].
  • Se produjeron distracciones significativas durante el transcurso del experimento sin que los investigadores lo supieran.
  • Los sujetos que abandonan selectivamente el experimento, especialmente si el abandono está correlacionado con la(s) variable(s) independiente(s).
  • Variación en los datos debido a la velocidad y confiabilidad de la conexión de red, tipos de navegador y computadora, tamaño y resolución de pantalla, etc. [ 5 ]
  • Los sujetos se tomaron el experimento menos en serio y se comportaron con menor aversión al riesgo [ 13 ].
  • Los sujetos no creen que estén interactuando con socios humanos reales.
  • Preocupaciones de los sujetos sobre la compensación al final del experimento o el anonimato del procesamiento del pago [ 14 ]
  • La naturaleza no representativa de los usuarios de computadoras que participan, en su mayoría angloparlantes [ 5 ].

Ante estas críticas, algunos investigadores han argumentado que los experimentos presenciales se ven igualmente afectados por estos problemas, si no más. [ 15 ] [ 16 ] [ 17 ]

Se han realizado estudios para probar la validez interna de experimentos basados ​​en la web, comparando entre condiciones experimentales (en línea y fuera de línea) y replicando con éxito los hallazgos. Por ejemplo, Schoeffler et al. (2013) compararon resultados de laboratorio y en línea (62 y 1168 sujetos) de un experimento auditivo y no encontraron diferencias significativas. [ 18 ] Un experimento pareado en economía conductual dividido en entornos de laboratorio en línea y tradicional produjo resultados sustancialmente similares. [ 1 ] Se ha demostrado que los sujetos no remunerados y no supervisados ​​en LabintheWild replican los resultados de estudios previos en laboratorio con una calidad de datos comparable. [ 19 ]

Metodologías

Se han sugerido protocolos experimentales para prevenir o controlar las dificultades asociadas con la experimentación en línea. Métodos como el emparejamiento secuencial de sujetos, el seguimiento del tiempo de fondo y del uso del ratón, y la compensación instantánea a través de PayPal tienen el potencial de abordar muchas de las preocupaciones sobre la validez interna de los experimentos en línea. [ 1 ] Estos métodos controlan las diferencias en los tiempos de respuesta, abordan los problemas de abandono selectivo, concentración y distracción, minimizan la preocupación de los sujetos sobre la compensación, mejoran la confianza de los sujetos en que tienen un compañero humano real en el experimento y aseguran que los sujetos tengan una comprensión adecuada de las instrucciones y los problemas de decisión del experimento. [ 1 ]

Los investigadores también han formulado técnicas para disminuir o compensar las deserciones, incluyendo la técnica de alto obstáculo (la información motivacionalmente adversa se agrupa al inicio del estudio), la verificación de seriedad (solicitar a los participantes que estimen la probabilidad de completar el estudio) y la fase de calentamiento (colocar primero los formularios de consentimiento u otros materiales previos al estudio para seleccionar las muestras antes de que comience el estudio). [ 5 ]

Ejemplos

Uso en psicología

Se realizan numerosos experimentos psicológicos en la web. La Lista de Experimentos Web ofrece una forma de reclutar participantes y archiva experimentos anteriores (más de 700 y en constante crecimiento). [ 20 ] Un buen recurso para diseñar un experimento web es la herramienta gratuita Wextor , que «crea dinámicamente las páginas web personalizadas necesarias para el procedimiento experimental» y es extraordinariamente fácil de usar. [ 21 ] Los experimentos web se han utilizado para validar resultados de investigaciones de laboratorio e investigación de campo y para realizar nuevos experimentos que solo son factibles si se realizan en línea. [ 5 ] Además, los materiales creados para experimentos web pueden utilizarse posteriormente en un entorno de laboratorio tradicional si se desea.

La investigación interdisciplinaria que utiliza experimentos web está en auge. Por ejemplo, varios investigadores de psicología y derecho han utilizado la web para recopilar datos. Lora Levett y Margaret Bull Kovera examinaron si los peritos de partes opuestas son eficaces para informar a los jurados sobre la falta de fiabilidad de las pruebas periciales. [ 22 ] En lugar de sensibilizar a los jurados sobre las deficiencias en el testimonio del otro perito, las investigadoras descubrieron que los jurados se volvieron más escépticos ante todos los testimonios periciales. En su experimento, esto condujo a un mayor número de veredictos de culpabilidad. La investigación de Levett y Kovera utilizó una transcripción escrita de un juicio, que los participantes leyeron antes de emitir su veredicto. Este tipo de estímulo ha sido criticado por algunos investigadores por carecer de validez ecológica , es decir, porque no se asemeja a un juicio real. Muchos recomiendan el uso de vídeo siempre que sea posible. Investigadores de la Universidad de Nueva York están llevando a cabo un estudio de psicología y derecho que utiliza el vídeo de un juicio penal. [ 23 ]

Investigadores de la Universidad de Salford están llevando a cabo varios estudios en línea para explorar la percepción del sonido. [ 24 ] Los experimentos de sonido a través de la web son particularmente difíciles debido a la falta de control sobre el equipo de reproducción de sonido.

Salganik, Dodds y Watts realizaron un experimento para medir la influencia social, específicamente en la popularidad de las canciones. El uso de internet les permitió reunir a más de 14 000 participantes y examinar la relación entre el comportamiento individual y colectivo. [ 7 ]

Uso en economía

A medida que se han realizado más experimentos en economía, han surgido interrogantes sobre la metodología y la organización de los estudios. Jerome Hergueux y Nicolas Jacquemet desarrollaron un "laboratorio en línea" para comparar las preferencias sociales y la aversión al riesgo tanto en línea como presencialmente. Administraron una evaluación de la aversión al riesgo, un juego del bien público, un juego de confianza, un juego del dictador y un juego del ultimátum a grupos tanto en línea como en un laboratorio, como una forma de evaluar la validez interna de la experimentación en línea en economía. [ 1 ]

Uso en ciencias políticas

Un experimento de campo en línea realizado con 61 millones de usuarios de Facebook puso a prueba si recibir información sobre votaciones, centros de votación y el comportamiento electoral de los amigos llevaba a las personas a buscar información política, influía en la autoexpresión política y modificaba el comportamiento electoral en el mundo real. [ 8 ]

Uso en estudios de Internet

Los experimentos basados ​​en la web tienen especial relevancia en los estudios sobre el funcionamiento de las comunidades en línea. Los estudios de Internet , incluidos los de comunidades en línea y redes sociales, han utilizado experimentos naturales y de campo para comprender los efectos de las recompensas informales en la producción entre pares en Wikipedia, [ 25 ] [ 26 ] así como el impacto del reconocimiento y el apoyo tempranos en los éxitos futuros en Kickstarter , Change.org , Epinions y Wikipedia. [ 27 ] Otro experimento analizó el efecto en las tasas de edición de la introducción de un programa de asignación inteligente de tareas en Wikipedia. [ 28 ]

Referencias

  1. 1 2 3 4 5 6 Hergueux, J.; Jacquemet, N. (2014). "Preferencias sociales en el laboratorio en línea: un experimento aleatorio" (PDF) . Economía Experimental . 18 (2): 251– 283. doi : 10.1007/s10683-014-9400-5 . S2CID 14347177 . 
  2. Reips, U.-D. (2007). La metodología de los experimentos basados ​​en Internet. En A. Joinson, K. McKenna, T. Postmes y U.-D. Reips (Eds.), Manual de Oxford de Psicología de Internet (pp. 373-390). Oxford: Oxford University Press.
  3. Reips, U.-D. y Krantz, JH (2010). Realización de experimentos reales en la web. En S. Gosling y J. Johnson, Métodos avanzados de Internet en las ciencias del comportamiento (págs. 193-216). Washington, DC: Asociación Americana de Psicología.
  4. Lourenco, Stella F.; Tasimi, Arber (2020-08-01). "Ningún participante se queda atrás: Realizando ciencia durante la COVID-19" . Trends in Cognitive Sciences . 24 (8): 583– 584. doi : 10.1016/j.tics.2020.05.003 . ISSN 1364-6613 . PMC 7211671. PMID 32451239 .   
  5. 1 2 3 4 5 6 7 Reips, Ulf-Dietrich (2002). " Estándares para la experimentación basada en Internet" (PDF) . Psicología experimental . 49 (4): 243– 56. doi : 10.1026/1618-3169.49.4.243 . PMID 12455331. S2CID 2404134 .  
  6. Kramer, ADI; Guillory, JE; Hancock, JT (2014). "Evidencia experimental de contagio emocional a gran escala a través de redes sociales" . Actas de la Academia Nacional de Ciencias . 111 (24): 8788– 8790. Bibcode : 2014PNAS..111.8788K . doi : 10.1073/pnas.1320040111 . PMC 4066473. PMID 24889601 .  
  7. 1 2 Salganik, MJ ; Dodds, PS; Watts, DJ (2006). "Estudio experimental de la desigualdad y la imprevisibilidad en un mercado cultural artificial". Science . 311 ( 5762): 854– 856. Bibcode : 2006Sci...311..854S . doi : 10.1126/science.1121066 . PMID 16469928. S2CID 7310490 .  
  8. 1 2 Bond, RM; Fariss, CJ; Jones, JJ; Kramer, ADI; Marlow, C.; Settle, JE; Fowler, JH (2012). "Un experimento de 61 millones de personas sobre influencia social y movilización política" . Nature . 489 (7415): 295– 298. Bibcode : 2012Natur.489..295B . doi : 10.1038/nature11421 . PMC 3834737. PMID 22972300 .  
  9. Henrich, J.; Heine, SJ; Norenzayan, A. (2010). "¿Las personas más raras del mundo?" ( PDF) . Behavioral and Brain Sciences . 33 ( 2–3 ): 61–83 . doi : 10.1017/s0140525x0999152x . hdl : 11858/00-001M-0000-0013-26A1-6 . PMID 20550733. S2CID 220918842 .  
  10. Hoffman, M., & Morgan, J. (2011). ¿Quién se porta mal? ¿Quién se porta bien? Preferencias sociales en las industrias en línea. Documento de trabajo de la UC Berkeley.
  11. Anderhub, V.; Müller, R.; Schmidt, C. (2001). "Diseño y evaluación de un experimento económico a través de Internet" . Journal of Economic Behavior & Organization . 46 (2): 227– 247. doi : 10.1016/s0167-2681(01)00195-0 .
  12. Kahneman, D. (2003). "Mapas de racionalidad limitada: Psicología para la economía conductual". The American Economic Review . 93 (5): 1449– 1475. doi : 10.1257/000282803322655392 . S2CID 15131441 . 
  13. Shavit, T.; Sonsino, D.; Benzion, U. (2001). "Un estudio comparativo de la evaluación de loterías en clase y en la web". Journal of Economic Psychology . 22 (4): 483– 491. doi : 10.1016/S0167-4870(01)00048-4 .
  14. Eckel, CC; Wilson, RK (2006). "Precauciones en Internet: Juegos experimentales con socios de Internet". Economía experimental . 9 : 53–66 . doi : 10.1007/s10683-006-4307-4 . S2CID 30675518 . 
  15. Reips, U.-D. (1996, octubre). Experimentando en la World Wide Web. Ponencia presentada en la conferencia de la Sociedad de Informática en Psicología de 1996, Chicago.
  16. "Laboratorios virtuales: ¿Hay sabiduría en la multitud?" . New Scientist. 16 de marzo de 2007.
  17. "Una red de investigación" . www.apa.org . Archivado del original el 10 de mayo de 2000.
  18. Schoeffler et al. (2013). "Un experimento sobre la estimación del número de instrumentos en la música polifónica: una comparación entre los resultados de Internet y los de laboratorio".
  19. Reinecke, Katharina; Gajos, Krzysztof Z. (2015-01-01). "LabintheWild". Proceedings of the 18th ACM Conference on Computer Supported Cooperative Work & Social Computing. CSCW '15. New York, NY, USA: ACM. pp. 1364–1378. doi:10.1145/2675133.2675246. ISBN 978-1-4503-2922-4. S2CID 2739130.
  20. "Home". wexlist.net.
  21. "WEXTOR Webserver".
  22. Levett; Kovera (2008). "The Effectiveness of Opposing Expert Witnesses for Educating Jurors about Unreliable Expert Evidence". Law and Human Behavior. 32 (4): 363–74. doi:10.1007/s10979-007-9113-9. PMID 17940854. S2CID 809273.
  23. Virginia vs. McNamara
  24. "Internet sound experiments | psychoacoustic tests University of Salford".
  25. Restivo, Michael; Rijt, Arnout van de (2012-03-29). "Experimental Study of Informal Rewards in Peer Production". PLOS ONE. 7 (3) e34358. Bibcode:2012PLoSO...734358R. doi:10.1371/journal.pone.0034358. ISSN 1932-6203. PMC 3315525. PMID 22479610.
  26. Zhu, Haiyi; Zhang, Amy; He, Jiping; Kraut, Robert E.; Kittur, Aniket (2013-01-01). "Effects of peer feedback on contribution". Proceedings of the SIGCHI Conference on Human Factors in Computing Systems. CHI '13. New York, NY, USA: ACM. pp. 2253–2262. doi:10.1145/2470654.2481311. ISBN 978-1-4503-1899-0. S2CID 17167144.
  27. Rijt, Arnout van de; Kang, Soong Moon; Restivo, Michael; Patil, Akshay (2014-05-13). "Field experiments of success-breeds-success dynamics". Proceedings of the National Academy of Sciences. 111 (19): 6934–6939. Bibcode:2014PNAS..111.6934V. doi:10.1073/pnas.1316836111. ISSN 0027-8424. PMC 4024896. PMID 24778230.
  28. Cosley, Dan; Frankowski, Dan; Terveen, Loren; Riedl, John (1 de enero de 2007). «SuggestBot». Actas de la 12.ª conferencia internacional sobre interfaces de usuario inteligentes . IUI '07. Nueva York, NY, EE. UU.: ACM. págs. 32–41 . doi : 10.1145/1216295.1216309 . ISBN  978-1-59593-481-9. S2CID 906034 . 
  • En The Web Experiment List , Ulf-Dietrich Reips y Ralph Lengler comparten sus experiencias.
  • Tutorial sobre la participación ciudadana a través de experimentos web de audio.