¿Cómo seleccionan los revisores las conferencias/revistas?

Cuando envía un artículo/manuscrito a un lugar revisado por pares, los organizadores generalmente envían su trabajo a otros 2 o 3 "expertos en su campo" para evaluar su trabajo.

Tengo curiosidad por saber cómo funciona este proceso de selección, es decir, ¿cómo se organiza este grupo de revisores? y ¿cómo se eligen las mejores personas de este grupo una vez que hay un trabajo para revisar?

¿Hay una lista oficial que cada lugar mantiene y en la que las personas pueden registrarse si quieren ser revisores? (Si es así, nunca he visto "llamadas para revisores", entonces, ¿cómo consiguen personas?)

¿Los organizadores llaman en frío a personas/profesores y les preguntan si están dispuestos a revisar un artículo? Si es así, ¿cómo se seleccionan estas personas? [Me doy cuenta de que esto puede diferir considerablemente, así que también estoy contento con la evidencia anecdótica]

Respuestas (3)

En las revistas que ayudo a editar (todas en el campo de la medicina), hay cinco formas de encontrar revisores para nuestros manuscritos:

  1. Han publicado con nosotros antes
  2. Fueron nominados por los autores, editores, otros revisores o pares, o miembros de nuestro consejo editorial.
  3. Nuestros editores asociados se acercaron a ellos a través de un escaneo de autores de artículos sobre el mismo tema.
  4. Se han ofrecido como voluntarios para ser incluidos en nuestra lista de revisores.
  5. Trabajan para nosotros como consultores y se les paga por revisión (esto es principalmente relevante cuando necesitamos experiencia especializada, como en estadística o economía)

Una vez que lo encontramos, lo ubicamos en un grupo del cual podemos hacer selecciones en función de su afiliación, experiencia, antigüedad, etc.

Como puede imaginar, este es un recurso bastante valioso. Guardamos celosamente esta lista y no la compartimos con otras revistas.

Según mi experiencia, la tasa de respuesta suele ser del 33 %. Es decir, si requerimos cinco reseñas, invitaremos a quince personas. Por lo tanto, el grupo debe ser profundo para recibir la cantidad necesaria de revisiones para nuestros propósitos.

Para mí (como editor), otra fuente principal de referencias proviene de observar a los autores de los artículos más relevantes y recientes citados en un manuscrito enviado. No tengo una "lista" que sería "guardada celosamente", sin embargo... eso parece un poco extraño ya que cualquiera puede averiguar fácilmente quién está trabajando en un área determinada.

Ejemplos de mi experiencia:

  • Cualquiera que tenga una cuenta en el sistema de gestión editorial por cualquier motivo. Pueden ser autores anteriores, revisores anteriores, miembros del consejo editorial anteriores, personas que nos han escrito solicitando explícitamente ser revisores, etc., siempre que no hayan indicado que no están dispuestos a revisar o que no estén actualmente en la lista negra (p. ej. si un revisor escribe una crítica muy mala, podríamos incluirlo en la lista negra).
  • Revisores sugeridos por el autor (que tratamos de usar con moderación ya que a menudo conocen personalmente al autor)
  • Revisores sugeridos por otros revisores (p. ej., si invitamos, rechazan pero sugieren X, invitaremos a X)
  • De las referencias del artículo. Si el documento está bien escrito, la introducción brindará muchos trabajos relacionados, y los autores de estos trabajos relacionados serán adecuados para revisar el documento.
  • Búsqueda a través de Google Scholar, Web of Science, etc. usando palabras clave para el artículo (a veces, pero no necesariamente, las palabras clave proporcionadas por el autor).
  • Contactos personales.

Para elegir personas del grupo de revisores: elija a la persona con la experiencia más cercana, siempre que no esté sobrecargada (por ejemplo, ya tiene una invitación pendiente o ha realizado tres revisiones en tres meses).

La invitación fría a los revisores sucede, y es un resultado natural de algunos de los métodos mencionados anteriormente. Sin embargo, generalmente no se percibe como socialmente inaceptable. Si el revisor no desea revisar para la revista, puede rechazarlo indicando que no está interesado permanentemente, dejamos una nota en su perfil y se lo excluye de futuras búsquedas.

Respondiendo desde la perspectiva de las conferencias informáticas:

Hay un comité, generalmente denominado "comité de programa". Este es un grupo de personas invitadas por los organizadores de la conferencia y este comité se forma antes de que se envíen los documentos. El tamaño del comité del programa varía de una docena para un pequeño taller a miles para una gran conferencia de aprendizaje automático. La lista generalmente se publica y cambiará de un año a otro.

A veces, el comité del programa hace toda la revisión. Los trabajos son asignados por los presidentes de los programas en base a un proceso de licitación. Sin embargo, también pueden traer sub-revisores. Los subrevisores son terceros que son llamados en frío para revisar un documento debido a su experiencia relevante. La selección de los subrevisores depende de los miembros del comité del programa. Por lo general, preguntan a personas que conocen, o si están perdidos, buscan en las referencias del trabajo enviado.

Por lo que puedo decir, su enlace proporciona la lista de revisores, no el comité del programa; el comité real es ciertamente más de una docena de personas, pero tampoco son miles.
@ArnaudD. La terminología varía. Para ese ejemplo, NIPS, el comité se divide en cuatro niveles y el nivel más grande/más bajo se denomina simplemente "revisores".
Para NIPS, por contexto, cada revisor hace ~6 revisiones (cada presentación tiene más de 3 revisiones), por lo que es lo que otras conferencias llamarían un "comité de programa". Este año hubo 3045 revisores , 240 presidentes de área , 35 presidentes de área sénior y luego un puñado de organizadores por encima de eso.