¿Qué suele suceder durante el proceso de revisión por pares de la conferencia (área técnica)?

Supongamos que está enviando un documento a una conferencia, su documento borrador ha sido enviado y tomará aproximadamente cuatro meses para que regresen las revisiones, se le dará la aceptación/rechazo y, si es aceptado, se le indicará que envíe el borrador final.

¿Puede un informante arrojar algo de luz sobre lo que sucede exactamente entre estos cuatro meses en una conferencia típica en campos técnicos como la informática o la ingeniería?

Por ejemplo, ¿cuántas personas suelen estar en el comité de revisión por pares? ¿Son generalmente profesores o estudiantes de doctorado? ¿Cómo se informan los revisores entre sí sobre sus opiniones y comentarios? ¿Cuánto tiempo lleva realmente (durante el período de revisión) evaluar un solo trabajo? Finalmente, ¿cómo se evalúan al final las decisiones tomadas por los revisores? ¿Qué pasa si hay la misma cantidad de personas a favor de rechazar un trabajo que de aceptarlo?

Respuestas (1)

Esta es mi experiencia en ingeniería de software , un subcampo de la informática.

Por ejemplo, ¿cuántas personas suelen estar en el comité de revisión por pares?

Este comité normalmente se llama comité de programa (PC), y el número de miembros involucrados difiere significativamente entre conferencias: he visto números entre 25 y más de cien. La PC generalmente aparece en el sitio web de la conferencia.

El número de revisores para cualquier trabajo individual suele ser de 3 o 4, y se puede asignar a cada miembro del PC la revisión de un mayor número de trabajos, a menudo entre 10 y 25. Para administrar esta carga de trabajo, los miembros del PC pueden delegar sus revisiones a colegas o estudiantes de doctorado En consecuencia, la cantidad real de revisores involucrados en la conferencia puede ser mucho mayor que lo que indica el tamaño de la PC.

Además, especialmente en conferencias más grandes, puede haber un segundo nivel de revisores, llamado "Panel de revisión de expertos" o algo similar, cuyos miembros generalmente revisan una cantidad menor de documentos. Por ejemplo, se pueden asignar a trabajos si se encuentran en el límite entre la aceptación y el rechazo después de la revisión inicial.

¿Son generalmente profesores o estudiantes de doctorado?

En su mayoría profesores, algunos posdoctorados y, en algunos casos raros, estudiantes de doctorado tardíos. Sin embargo, nuevamente vale la pena señalar que los profesores pueden delegar algunas de sus revisiones a sus estudiantes de doctorado.

¿Cómo se informan los revisores entre sí sobre sus opiniones y comentarios?

Para organizar el proceso de revisión, las conferencias suelen utilizar un software dedicado llamado sistema de gestión de conferencias , como EasyChair.

Si envió su documento a través de algún sitio web, probablemente fue un sistema de gestión de conferencias; además de la perspectiva del autor, también hay una perspectiva dedicada para los miembros del PC.

¿Cuánto tiempo lleva realmente (durante el período de revisión) evaluar un solo trabajo?

Los revisores suelen recibir entre uno y dos meses. Algunas conferencias tienen un sistema de refutación, donde en realidad hay dos rondas de revisiones, con un período de respuesta del autor en el medio. Esto se especificaría entonces en la convocatoria de ponencias.

Finalmente, ¿cómo se evalúan al final las decisiones tomadas por los revisores?

Hay diferentes opciones: puede haber una reunión de PC física donde todos los miembros del PC discuten los documentos en la misma sala, una reunión de PC virtual utilizando alguna plataforma en línea, o incluso ninguna reunión de PC, sino solo un período de discusión en la gestión de la conferencia. sistema.

En cualquier caso, hay una discusión sobre cada documento, y la discusión debe terminar con un acuerdo unánime entre los miembros del PC. Dado que la discusión está abierta a todos los miembros del PC, también puede suceder que personas que no fueron asignadas originalmente como revisores contribuyan a la discusión de un artículo.

¿Qué pasa si hay la misma cantidad de personas a favor de rechazar un trabajo que de aceptarlo?

Todo depende de la discusión. Sucede que la decisión numérica sobre un papel en realidad se invierte en función de la discusión.

Esta respuesta es bastante buena, pero creo que podría ser un tanto engañosa en cuanto al hecho de que el número de revisores para un artículo determinado suele ser de 3 a 5, y que estos pueden ser muy comúnmente estudiantes de doctorado. Si me imagino leyendo esta respuesta sin saber nada sobre los procedimientos, podría concluir fácilmente que un manuscrito enviado es analizado minuciosamente por más de 25 profesores.
+1 Lo único que agregaría aquí es que cada miembro del PC generalmente es responsable de revisar una gran cantidad de documentos en estos 1 o 2 meses, a menudo entre 10 y 25. En consecuencia, uno no tiene un mes para revisar un documento , uno tiene un mes de tiempo para revisar o delegar hasta 25 revisiones, además de la carga de trabajo habitual. Es decir, por lo general no es factible invertir más de unas pocas horas o un día laboral en la revisión de una sola conferencia.
Gracias, ambos comentarios son correctos y actualicé la respuesta en consecuencia.
@xLeitix 10-25 papeles parece muy ligero. Para las principales conferencias teóricas, cada miembro del PC es responsable de 30 a 50 artículos. Los PC teóricos se mantienen deliberadamente pequeños, porque los miembros del PC tienen prohibido enviar algo ellos mismos.
@JeffE Las cosas que aprendes. Si los revisores del ICSE, etc. tuvieran que revisar más de 30 artículos y se les prohibiera enviarlos, la conferencia podría encontrarse sin una computadora.