¿Curioso caso de autocitas y cómo monitorear las autocitas?

Si uno mira superficialmente las publicaciones del autor X, parece ser uno de los mejores científicos en su campo. Pero mirando más de cerca, sus citas son 60% de él mismo, 35% de su coautor y 5% de otros. (Algunas personas podrían decir: "No importa, probablemente él es el único que trabaja en ese campo y tiene que citarse a sí mismo". Sin embargo, digamos que no es el caso).

Este autor es solo un ejemplo de muchas personas que se citan a sí mismas. Muchos de nosotros crecimos para ver las citas como una medida y comenzamos a manejarlo mal. Como es fácil hacerlo. Mis preguntas son:

  1. ¿No existe un sistema que controle las autocitas poco éticas además del proceso de revisión por pares, en el que dichos autores superan dichas pruebas y aún así se citan a sí mismos en forma extensa?
  2. ¿No existe un sistema que incluye en la lista negra a los autores que se involucran en actividades poco éticas similares a las de los "científicos falsos" y nunca les permite publicar en ningún otro lugar?
  3. ¿No se dan cuenta las instituciones de que tales profesores son una amenaza potencial para la ciencia y les piden que renuncien?
  4. ¿Acaso esas personas no degradan a las personas científicas reales que pasan años de arduo trabajo para publicar su trabajo?
Estoy totalmente en desacuerdo con la idea de que las autocitas sean en general malas, inapropiadas o poco éticas.
La mayoría de los comentarios y respuestas discuten la autocitación per se , mientras que el caso aquí es sobre la autocitación excesiva . La versión original incluía un enlace a un perfil de Google Scholar donde el recuento de citas pasó de 500 a 5000 en un solo año, principalmente basado en autocitas.
El caso específico cubierto es bastante notorio, y parece ser el caso de una institución que intenta engañar al sistema para aumentar el rango de su Universidad: vea, por ejemplo, el siguiente artículo , o este quora Q&A .
Las autocitas no son poco éticas, pero si haces alguna bibliometría, deben ignorarse.
El tratamiento más probable de tales individuos por parte de las universidades es una promoción. ¡Este maravilloso académico bien citado está recibiendo mucho dinero de la subvención y más gastos generales para la universidad! (Bromeando espero...)
@Walter True, pero ¿alguien está argumentando lo contrario? Ni la pregunta ni las respuestas lo hacen, y cualquiera que trabaje en investigación sabe que la autocitación (con moderación, donde tenga sentido) es completamente normal e inevitable.
La ley de Goodhart establece que "cuando una medida se convierte en un objetivo, deja de ser una buena medida". En algún momento, la gente decidió que el recuento de citas era una buena medida de la productividad académica (y probablemente lo era). Tan pronto como se tomaron decisiones importantes (promoción, permanencia, etc.) comenzaron a realizarse en función del recuento de citas, algunos académicos comenzaron a manipularlo. Si "lo arreglamos", algunos académicos jugarán con las nuevas correcciones.
Las cuatro viñetas indican que las autocitas son una amenaza importante para la ciencia moderna. Por el contrario, creo que las personas que obtienen un mayor número de citas de otros autores pero tienen métodos científicos muy cuestionables son una amenaza mucho mayor.
@yo' Esa también fue mi reacción, pero podría compensar en exceso el trabajo que es principalmente de otros, pero terminas estando en la lista de autores por pequeñas contribuciones. Esos deberían contar, ¿no? Hm.
Bueno, es su decisión dónde trazar un límite entre "me han dado las gracias en reconocimiento por una pequeña charla en la esquina del café" y "pasar un tiempo que considero significativo y quiero ser coautor".

Respuestas (10)

No creo que haya una buena manera de evitar las autocitas, ya que la mayoría de las veces, su investigación actual se basa en su investigación anterior y, por lo tanto, su investigación anterior (o la de sus colaboradores) es relevante para su investigación actual. Sin embargo, desde mi experiencia, las autocitas forman una pequeña parte del número total de citas.

Asumiendo que el grupo del autor no es el único que trabaja en un tema, parece haber otros dos problemas aquí:

  1. otras personas no parecen citar su trabajo, lo que podría significar que es ignorado, su trabajo no es visible o simplemente no es lo suficientemente bueno o relevante.

  2. basar la calidad en el número de citas es erróneo. El número de citas está estrechamente relacionado con el índice H de los autores, que es criticado regularmente. La misma crítica debería ser válida para el número de citas.

Para abordar el "problema" de las autocitas (no diría que esto es un problema en la mayoría de los casos), algunas medidas basadas en citas se basan en citas que excluyen las autocitas. Por supuesto, esto se vuelve complicado cuando los colaboradores citan el trabajo de alguien, pero la gran mayoría de las autocitas se eliminarán de esta manera.

Estoy de acuerdo con todo, pero creo que la parte clave es que la autocitación normalmente no es un problema.

Para responder las preguntas directamente:

  1. No existe tal "sistema" que yo sepa. Hay una variedad de grupos independientes de "vigilancia", blogueros, etc., que a veces llaman la atención sobre lo que ven como abusos en las publicaciones académicas y, ocasionalmente, los casos notorios se discuten en los medios académicos o populares. Pero no tengo conocimiento de que estas personas u organizaciones monitoreen estos temas de manera sistemática, más allá de casos individuales. Ciertamente, no existe un solo organismo mundial que supervise el problema.

  2. Una vez más, no hay ningún sistema. La publicación académica está descentralizada y cada editor toma sus propias decisiones sobre cómo administrar sus revistas. Los editores individuales pueden tener sus propias listas negras internas de autores que han cometido abusos en las revistas de ese editor, y cuyo trabajo ya no será considerado por ese editor. Pero no existe una lista negra global, ni ninguna organización central que tenga el poder de hacerla cumplir. Mucha gente consideraría que una lista negra de este tipo no es ética (en el pasado se ha abusado de estos sistemas para excluir a personas por razones inapropiadas) y en algunas jurisdicciones la idea de una lista negra para toda la industria podría ser ilegal.

  3. Las instituciones toman sus propias decisiones. Es posible que no sepan acerca de tales abusos hasta que alguien les llame la atención. Podrían o no considerarlos lo suficientemente importantes como para despedir a un investigador. Pueden ser influidos por el éxito del investigador en otras áreas. Puede haber desacuerdo dentro de la institución sobre qué hacer. En muchos lugares existen políticas de permanencia que pueden dificultar el despido de un investigador; podría requerir un amplio consenso entre la facultad y la administración de que las acciones del investigador son inaceptables, además de requerir un proceso legal o cuasi legal largo y costoso. Es posible que las instituciones no sientan que el abuso de autocitas vale la pena.

  4. Podría decirse que Sin embargo, eso es una cuestión de opinión y fuera de tema para este sitio.

1) Sospecho que los valores sociales relacionados con las autocitas pueden variar de un campo a otro, pero en mi (parcialmente anterior) subdisciplina dentro de AI, las autocitas no están mal vistas, por lo que puedo ver.

2) No es necesariamente que las personas piensen que es una buena manera de aumentar el índice h porque algunas métricas excluyen las autocitas. En cambio, las autocitas ayudan a mejorar el perfil del artículo, lo que a su vez beneficia las citas reales.

3) Incluso si autocitarse es terrible, entonces los pocos que se autocitan mucho obligan a otros a hacerlo también, es decir, algunas personas simplemente pueden estar haciendo lo que tienen que hacer.

La gente es una academia de juego en tales casos, pero no la ciencia misma. No creo que las citas y el índice h sean parcialmente constitutivos de Science. Entonces, si está mal, entonces está violando una norma académica más que científica, en mi opinión. La 'ciencia real' sigue siendo ciencia independientemente de si se cita mucho o nada.

La autocitación en sí misma no es terrible. Si amplío mi investigación anterior y no me autocito, probablemente me plagiaré a mí mismo, por lo que a veces incluso es necesario. Solo las autocitas excesivas podrían ser 'terribles'.

El problema es que los recuentos de citas no son nada mejor que una aproximación bruta a una medida de calidad. Puede ver esto por el hecho de que "Smith es un imbécil que publicó una extensa serie de artículos [1-7] que afirman que la influenza se transmite al comer repollo; Jones [8] ha demostrado de manera concluyente que este no es el caso", da Smith's basura muchas más citas que la ciencia propiamente dicha de Jones.

  1. ¿No se dan cuenta las instituciones de que tales profesores son una amenaza potencial para la ciencia y les piden que renuncien?

No son una amenaza para la ciencia en absoluto. Son una amenaza para las personas que creen que la ciencia consiste en contar citas.

  1. ¿Acaso esas personas no degradan a las personas científicas reales que pasan años de arduo trabajo para publicar su trabajo?

No. Degradamos a los verdaderos científicos que pasan años de arduo trabajo para publicar su trabajo al reducir ese arduo trabajo a "Tengo diez citas y tú tienes seis, así que soy mejor que tú".

Las autocitas de un solo autor (en publicaciones revisadas por pares) difícilmente pueden generar un recuento de citas significativo (para publicaciones revisadas por pares) o un índice H, a menos que el autor X publique a una tasa muy alta en revistas revisadas por pares. La historia es diferente con las grandes colaboraciones: si cada uno de los ~100 autores cita su artículo en sus próximas publicaciones, esto genera varias 100 citas.

Editar. Por supuesto, solo se deben considerar las publicaciones revisadas por pares para evaluar el impacto académico.

"Las autocitas de un solo autor difícilmente pueden generar un recuento de citas significativo o un índice H". Depende de la herramienta utilizada para contar las citas. Por ejemplo, Google Scholar indexa cada PDF que parece un documento, incluido el trabajo legítimo, pero no revisado por pares (por ejemplo, tareas de pregrado) y documentos falsos simples.
La mayoría de las "citas" en el perfil enlazado originalmente eran material autopublicado en Researchgate y similares.
@lighthouse keeper sí, es factible y muchas personas lo están haciendo. Puedo volver a publicar el enlace de varios perfiles que conozco de Google Scholar.
@lighthousekeeper Homeworks no contribuirá al recuento de autocitas .
@DavidRicherby De hecho, gracias por aclarar. Un autor aún podría usar la tarea para aumentar su número de citas en GS, en particular si es el instructor de una clase muy concurrida. La tarea podría ser escribir una breve reseña de su artículo reciente y subir esta reseña en línea.

Hay un sistema que ignora tales citas. Ideas RePec (Research Papers in Economics) compila recuentos de citas para la investigación económica. Se calculan clasificaciones de autores que excluyen las autocitas y que, al clasificar revistas o series de documentos de trabajo, excluyen las citas de ese mismo medio.

Por ejemplo:

https://ideas.repec.org/top/top.person.nbcites.html

No hay nada, en absoluto, poco ético en la autocitación . Los autores deben citar su trabajo anterior cuando sea relevante para su trabajo actual, al igual que los coautores y cualquier otra persona que se refiera al trabajo.

Por otro lado, el tratamiento de la citación cuenta como una medida de habilidad en la falta de ética . Como cualquier otra métrica de este tipo, pervierte y distorsiona la ciencia.

Por lo tanto, su pregunta está dirigida al problema equivocado, y debido a que la pregunta se basa en una premisa incorrecta, no hay una buena respuesta para ella.

Esto tiene que suceder; los investigadores siguen su línea de investigación. Y sí, ayudará a su índice H a menos que se corrija manualmente. Pero, la mayoría de las instituciones de primer nivel saben esto, y un comité de contratación analizará esto en profundidad. En mi institución anterior, el índice H se volvió a calcular menos las autocitas. Los comités de contratación y los paneles de subvenciones no caerán en esto, así que no se preocupe demasiado.

La autocitación es algo razonable si desea que sea fácil para las personas seguir la historia de su trabajo.

La mayor parte de la progresión de la ciencia es gradual y la mayor parte de la progresión del trabajo individual de cada científico también es gradual.

Por lo tanto, no es muy extraño que un científico explique la evolución gradual de su trabajo citándose a sí mismo.

No monitoreas. Los dejas hacer.

Parece injusto, y sí tiene consecuencias negativas en la moral de los investigadores, aunque no importa la cantidad de autocitas y citas obtenidas sobre los hombros del trabajo de otros investigadores, solo por haber puesto su nombre en otros artículos que no han leído, no se acercarán al número de citas de artículos realmente innovadores.

Conocí a uno de estos profesores autocitados. En toda su carrera colocó su nombre en miles de artículos que ni siquiera ha leído y fomentó las autocitas a cualquier nivel, valorando el número por encima de la calidad. Tenía sus dedos en múltiples departamentos de investigación, y para hacer eso, principalmente estaba haciendo el aburrido trabajo del político. En veinte años de este aburrido trabajo, su número de citas fue un orden de magnitud inferior a las citas de un solo artículo exitoso (como Nakamoto, "Bitcoin: A Peer-to-Peer Electronic Cash System" o Rivest, Shamir, Adlemann "Un método para obtener firmas digitales y criptosistemas de clave pública").

Pero mientras tanto, él y sus similares mantuvieron vivos los departamentos y laboratorios de investigación, atrayendo a investigadores y estudiantes, mientras se hacían cargo de todo el trabajo administrativo y de gestión.