SCIgen es un generador de artículos que utiliza gramática libre de contexto para generar aleatoriamente textos sin sentido en forma de artículos de investigación en ciencias de la computación . Su fuente de datos original fue una colección de artículos de ciencias de la computación descargados de CiteSeer . Todos los elementos de los artículos están formados, incluyendo gráficos, diagramas y citas . Creado por científicos del Instituto Tecnológico de Massachusetts , su objetivo declarado es "maximizar la diversión, en lugar de la coherencia". [ 1 ] Originalmente creado en 2005 para exponer la falta de escrutinio de las presentaciones a conferencias, el generador posteriormente fue utilizado, principalmente por académicos chinos, para crear un gran número de presentaciones fraudulentas a conferencias, lo que llevó a la retractación de 122 artículos generados por SCIgen y a la creación de software de detección para combatir su uso. [ 2 ]
Salida de ejemplo
Resumen inicial de Rooter: Una metodología para la unificación típica de puntos de acceso y redundancia : [ 3 ]
Muchos físicos coincidirían en que, de no ser por el control de congestión, la evaluación de los navegadores web probablemente nunca se habría producido. De hecho, pocos hackers en todo el mundo discreparían de la unificación esencial de la voz sobre IP y el par de claves pública/privada. Para resolver este enigma, confirmamos que los SMP pueden ser estocásticos, almacenables en caché e interponibles.
Resultados destacados
En 2005, un artículo generado por SCIgen, Rooter: A Methodology for the Typical Unification of Access Points and Redundancy , fue aceptado como artículo no revisado para la Conferencia Mundial Multidisciplinaria sobre Sistemática, Cibernética e Informática (WMSCI) de 2005 y los autores fueron invitados a hablar. Los autores de SCIgen describieron su engaño en su sitio web, y pronto recibió gran publicidad cuando Slashdot lo recogió . La WMSCI retiró su invitación, pero el equipo de SCIgen fue de todos modos, alquilando un espacio en el hotel por separado de la conferencia y dando una serie de charlas generadas aleatoriamente en su propio "pista". El organizador de estas conferencias WMSCI es el profesor Nagib Callaos. Desde 2000 hasta 2005, la WMSCI también fue patrocinada por el Instituto de Ingenieros Eléctricos y Electrónicos . [ 4 ] El IEEE dejó de otorgar patrocinio a Callaos desde 2006 hasta 2008.
La presentación del artículo fue un intento deliberado de avergonzar a WMSCI, que, según los autores, acepta artículos de baja calidad y envía solicitudes masivas de artículos a académicos sin haberlas solicitado. Como indica el sitio web de SCIgen:
Una utilidad de este tipo de programa es generar automáticamente solicitudes para conferencias que, según sospechas, podrían tener estándares de presentación muy bajos. Un ejemplo claro, que quizás reconozcas del correo no deseado en tu bandeja de entrada, es SCI/IIIS y sus decenas de conferencias simultáneas (consulta la descripción general de la conferencia en el sitio web de WMSCI 2005).
— Acerca de SCIgen [ 5 ]
El escritor especializado en informática Stan Kelly-Bootle señaló en ACM Queue que muchas frases del artículo "Rooter" eran individualmente plausibles, lo que, a su juicio, suponía un problema para la detección automatizada de artículos fraudulentos. Sugirió que incluso los lectores humanos podrían dejarse engañar por el uso efectivo de la jerga ("El juego de palabras con root/router es típico del humor de los graduados del MIT, y al menos una mención a la metodología es obligatoria") y atribuir la aparente incoherencia del artículo a su propio conocimiento limitado. Su conclusión fue que "un filtro fiable de galimatías requiere una revisión holística y minuciosa por parte de varios expertos en la materia". [ 6 ]
Schlangemann
El seudónimo "Herbert Schlangemann" se utilizó para publicar artículos científicos falsos en congresos internacionales que afirmaban practicar la revisión por pares . El nombre proviene del cortometraje sueco Der Schlangemann .
- En 2008, en respuesta a una serie de correos electrónicos solicitando artículos , se utilizó SCIgen para generar un artículo científico falso titulado "Hacia la simulación del comercio electrónico ", con "Herbert Schlangemann" como autor. El artículo fue aceptado en la Conferencia Internacional de Ciencias de la Computación e Ingeniería de Software de 2008 (CSSE 2008) , copatrocinada por el IEEE , que se celebró en Wuhan, China , y el autor fue invitado a presidir una sesión basándose en su currículum vitae ficticio . [ 7 ] El comentario de revisión oficial: "Este artículo presenta tecnología cooperativa y comunicación clásica. En conclusión, el resultado muestra que, si bien el tan aclamado algoritmo anfibio para el refinamiento de algoritmos aleatorios es imposible, el conocido algoritmo cliente-servidor para el análisis de voz sobre IP de Kumar y Raman se ejecuta en tiempo _(n). Los autores pueden identificar claramente características importantes de la visualización de DHT y analizarlas con perspicacia. Se recomienda que los autores desarrollen las ideas de manera más coherente, las organicen de manera más lógica y las conecten con transiciones claras." El artículo estuvo disponible por un corto tiempo en la base de datos IEEE Xplore, pero luego fue eliminado. La historia completa se describe en el blog oficial "Herbert Schlangemann" [ 8 ] y también recibió atención en Slashdot [ 9 ] y el sitio de noticias tecnológicas en alemán Heise Online. [ 10 ] [ 11 ]
- En 2009, ocurrió el mismo incidente y el último artículo falso de Herbert Schlangemann, PlusPug: A Methodology for the Improvement of Local-Area Networks, fue aceptado para presentación oral en la Conferencia Internacional de 2009 sobre Seguridad de Sistemas de Información y Negocios Electrónicos (EBISS 2009) , también copatrocinada por el IEEE , que se celebraría de nuevo en Wuhan, China . [ 8 ]
En todos los casos, los artículos publicados fueron retirados de las actas de las conferencias, y tanto el comité organizador de la conferencia como los nombres de los ponentes principales fueron eliminados de sus sitios web.
Lista de obras con notable aceptación
En conferencias
- Rob Thomas: Rooter: Una metodología para la unificación típica de puntos de acceso y redundancia , 2005 para WMSCI (ver arriba)
- El trabajo de Mathias Uslar fue aceptado en la conferencia IPSI-BG. [ 12 ]
- El profesor Genco Gulan publicó un artículo en el 3er Simposio Internacional de Diseño de Medios Interactivos. [ 13 ]
- Un artículo de cienciometría de 2013 demostró que al menos 85 artículos de SCIgen han sido publicados por IEEE y Springer . [ 14 ] Más de 120 artículos de SCIgen fueron eliminados según esta investigación. [ 15 ]
En revistas
- Estudiantes de la Universidad Tecnológica Sharif de Irán publicaron un artículo en la revista Journal of Applied Mathematics and Computation de Elsevier . [ 16 ] Los estudiantes escribieron bajo el apellido "MosallahNejad", que se traduce literalmente del persa (a pesar de no ser un nombre persa tradicional ) como "de una raza armada". El artículo fue retirado posteriormente cuando se informó a los editores de que se trataba de un artículo humorístico. [ 17 ]
- Mikhail Gelfand publicó una traducción del artículo de «Rooter» en la Revista de Publicaciones Científicas de Aspirantes y Doctorandos en ruso en agosto de 2008. Gelfand protestaba contra la revista, que aparentemente no estaba sometida a revisión por pares y era utilizada por doctorandos rusos para publicar en una revista científica « acreditada », cobrándoles 4000 rublos por ello. La acreditación fue revocada dos semanas después. [ 18 ] [ 19 ] [ 20 ] [ 21 ] (Véase Dissernet para obtener información relacionada).
- Springer Science+Business Media e IEEE también fueron objeto de bromas similares.
Suplantación de identidad en Google Scholar y calculadoras de índice h
La labor de revisión realizada en nombre del Instituto de Ingenieros Eléctricos y Electrónicos también ha sido objeto de críticas tras el descubrimiento de artículos falsos en publicaciones de congresos, en particular por Labbé y un investigador que utilizaba el seudónimo de Schlangemann . [ 22 ] [ 23 ] [ 24 ] [ 25 ] [ 26 ] [ 27 ]
Cyril Labbé, de la Universidad de Grenoble, demostró la vulnerabilidad de los cálculos del índice h basados en los resultados de Google Scholar al introducir en el sistema un gran conjunto de documentos generados por SCIgen que se citaban entre sí, lo que equivalía a una granja de enlaces académicos , en un artículo de 2010. Mediante este método, el autor logró, por ejemplo, clasificar a "Ike Antkare" por delante de Albert Einstein . [ 28 ]
Retractaciones de 2013
En 2013, Springer y el IEEE retractaron más de 122 artículos de conferencias publicados y generados con SCIgen . A diferencia de envíos anteriores que pretendían ser bromas, estos fueron realizados en su mayoría por académicos chinos que utilizaban artículos de SCIgen para aumentar su historial de publicaciones. [ 29 ]
SciDetect
En 2015, Springer lanzó SciDetect . Este software, desarrollado por Cyril Labbé, está diseñado para detectar automáticamente artículos generados por SCIgen. [ 2 ]
Informe de 2021
En 2021, se publicó un estudio sobre 243 artículos de SCIgen que habían sido publicados en la literatura académica. Encontraron que los artículos de SCIgen representaban 75 por millón de artículos (< 0,01 %) en ciencias de la información, y que solo una pequeña fracción de los artículos detectados había sido tratada. [ 30 ] [ 31 ]
Véase también
- Conferencia académica
- Caso Bogdanov
- Desviación (trastorno del pensamiento)
- Caso de estudios de quejas
- Teorema del mono infinito
- Lista de estafas en el ámbito de la publicación académica
- Generador de papel
- Generador de parodias
- Generador de posmodernismo
- asunto Sokal
- El motor
- Prueba de Turing
- Sácame de tu maldita lista de correo.
- ¿Quién le teme a la revisión por pares?
Referencias
- ↑ SCIgen - Un generador automático de trabajos de informática
- 1 2 Bohannon, John (27-03-2015). "Software de detección de bulos identifica artículos falsos" . Science | AAAS . Recuperado el 28-09-2020 .
En lugar de ser creados como bromas, parece que muchos de los artículos falsos provenían de China, donde fueron "comprados por académicos y estudiantes" para inflar sus registros de publicaciones, dice el investigador principal de la investigación, Cyril Labbé, científico informático de la Universidad Joseph Fourier en Grenoble, Francia.
- ↑ Stribling, Jeremy; Aguayo, Daniel; Krohn, Maxwell. "Rooter: Una metodología para la unificación típica de puntos de acceso y redundancia" (PDF) .
- ↑ Heinrich Zankl: Der Science-Generator-ein geniales Publikationsprogramm . En W. Hömberg, E. Roloff (Herausgeber): Jahrbuch der Marginalistik IV: Lit-Verlag. Münster. 2016 págs. 60–67. ISBN 978-3-643-99793-7
- ↑ "SCIgen - Un generador automático de artículos de informática" . MIT.
- ↑ Stan Kelly-Bootle (julio-agosto de 2005). "¿A eso le llamamos galimatías?" . ACM Queue . 3 (6): 64. doi : 10.1145/1080862.1080884 .
- ↑ «Programa de Conferencias CSSE» (PDF) .
- 1 2 "El blog oficial de Herbert Schlangemann, toda la historia detrás del artículo "Hacia la simulación del comercio electrónico"" .
- ↑ kdawson (24 de diciembre de 2008). "Artículo generado por software aceptado en la conferencia IEEE" . Slashdot . VA Linux Systems Japan . Consultado el 5 de mayo de 2009 .
- ^ Peter-Michael Ziegler (26 de diciembre de 2008). "Dr. Herbert Schlangemann - oder die Geschichte eines pseudowissenschaftlichen Nonsens-Papiers (en alemán)" . Heise en línea . Heise Zeitschriften Verlag . Consultado el 5 de mayo de 2009 .
- ↑ Página web de Heise Online (en alemán)
- ↑ "Artículo de Mathias Uslar" . Archivado del original el 15 de junio de 2009.
- ↑ "Acerca del artículo de Genco Gulan" . Archivado del original el 12 de octubre de 2007. Consultado el 26 de junio de 2007 .
- ↑ "Publicaciones duplicadas y falsas en la literatura científica : ¿Cuántos artículos de SCIgen hay en Ciencias de la Computación?" (PDF) . Hal.archives-ouvertes.fr . Consultado el 15 de mayo de 2014 .
- ↑ "Las editoriales retiran más de 120 artículos sin sentido" . Nature . 24 de febrero de 2014. Consultado el 25 de febrero de 2014 .
- ↑ Rohollah Mosallahnezhad. "Algoritmos cooperativos y compactos para algoritmos aleatorios" (PDF) . Archivado del original (PDF) el 29 de diciembre de 2009.
- ↑ Rohollah Mosallahnezhad (2007), "REMOVED: Cooperative, compact algorithms for randomized algorithms", Applied Mathematics and Computation , doi : 10.1016/j.amc.2007.03.011
- ^ "¡Mon ordinateur écrit mieux que le tien!" . Agencia Science-Presse (en francés). Canadá. 8 de septiembre de 2009 . Consultado el 4 de octubre de 2011 .
- ↑ "Rooter invade Rusia" . SCIgen . 8 de enero de 2009. Archivado del original el 3 de abril de 2014. Consultado el 4 de octubre de 2011 .
- ↑ Malozemov, Sergei (7 de octubre de 2008).Группа отечественных ученых поставила эксперимент — смешала сложные термины случайным образом, а полученный текст отослала в один из научных журналов. NTV (en ruso) . Consultado el 4 de octubre de 2011 .
- ↑ "Comentarios". New Scientist . 15 de agosto de 2009.
- ↑ Labbé, Cyril; Labbé, Dominique (2013). "Publicaciones duplicadas y falsas en la literatura científica: ¿cuántos artículos SCIgen hay en ciencias de la computación?" . Scientometrics . 94 (1): 379– 396. doi : 10.1007/s11192-012-0781-y . S2CID 6889400 .
- ↑ Oransky, Ivan (24 de febrero de 2014). "Springer e IEEE retiran más de 120 artículos sin sentido" . retractionwatch.com . WordPress.com . Consultado el 29 de abril de 2014 .
- ↑ de Gloucester, Paul Colin (2013). "Los árbitros a menudo pasan por alto errores obvios en publicaciones electrónicas y computarizadas" . Accountability in Research: Policies and Quality Assurance . 20 (3): 143– 166. Bibcode : 2013ARPQ...20..143D . doi : 10.1080/08989621.2013.788379 . PMID 23672521. S2CID 42975675 .
- ↑ Dawson, K. (23 de diciembre de 2008). "Artículo generado por software aceptado en la conferencia IEEE" . slashdot.org . Dice . Recuperado el 29 de abril de 2014 .
- ^ Hatta, Masayuki (24 de diciembre de 2008). "IEEEカンファレンス、自動生成のニセ論文をアクセプト" . slashdot.jp (en japonés). Corporación OSDN. Archivado desde el original el 19 de abril de 2014 . Consultado el 29 de abril de 2014 .
- ^ Ziegler, Peter-Michael (26 de diciembre de 2008). "Dr. Herbert Schlangemann - oder die Geschichte eines pseudowissenschaftlichen Nonsens-Papiers" . heise.de (en alemán). Heise Zeitschriften Verlag . Consultado el 29 de abril de 2014 .
- ↑ «Les rapports de recherche du LIG» (PDF) . Rr.liglab.fr . Consultado el 15 de mayo de 2014 .
- ↑ Van Noorden, Richard (2014). "Las editoriales retiran más de 120 artículos sin sentido" . Nature News . doi : 10.1038/nature.2014.14763 .
- ↑ Cabanac, Guillaume; Labbé, Cyril (25 de mayo de 2021). "Prevalencia de artículos generados algorítmicamente sin sentido en la literatura científica" . Journal of the Association for Information Science and Technology . 72 (12): 1461– 1476. doi : 10.1002/asi.24495 . ISSN 2330-1635 . S2CID 236374033 .
- ↑ Noorden, Richard Van (27 de mayo de 2021). " Cientos de artículos sin sentido aún acechan en la literatura científica" . Nature . 594 (7862): 160–161 . Bibcode : 2021Natur.594..160V . doi : 10.1038/d41586-021-01436-7 . PMID 34045760. S2CID 235232305 .
Lecturas adicionales
- Ball, Philip (2005). "Conferencia de informática recibe con agrado artículo incomprensible" . Nature . 434 (7036): 946. Bibcode : 2005Natur.434..946B . doi : 10.1038/nature03653 . PMID 15846311 .
- kdawson (24 de diciembre de 2008). "Artículo generado por software aceptado en la conferencia IEEE" . Slashdot . VA Linux Systems Japan . Recuperado el 5 de mayo de 2009 .
- Peter-Michael Ziegler (26 de diciembre de 2008). "Dr. Herbert Schlangemann - oder die Geschichte eines pseudowissenschaftlichen Nonsens-Papiers (en alemán)" . Heise en línea . Heise Zeitschriften Verlag . Consultado el 5 de mayo de 2009 .
Enlaces externos
- Copia del artículo falso: Hacia la simulación del comercio electrónico, de Herbert Schlangemann.
- SCIgen - Un generador automático de exámenes de informática
- Sitio web de detección de SCIgen
- Escándalos académicos
- Aplicaciones de la inteligencia artificial
- Lenguajes formales
- Engaños en la ciencia
- Generación de lenguaje natural
- Publicaciones académicas