¿En qué medida influye la política interna en la aceptación de presentaciones a conferencias de alto perfil?

Estuve hablando con varios profesores en mi departamento sobre la presentación a conferencias de alto perfil como CHI en interacción humano-computadora. La mayoría de los profesores opinaron que la aceptación en la mayoría de estas conferencias de alto perfil (tasa de aceptación típica de menos del 20 %) está fuertemente influenciada por la política: aunque usted pueda tener una investigación comparativamente buena, lo más probable es que los editores sean más favorecidos para aceptar trabajos publicados por Microsoft Research o Google Research o de otras universidades de alto perfil donde tengan una relación cercana con la facultad y los investigadores.

Los profesores me aconsejaron que no gastara tiempo y recursos en publicar en estas conferencias y, en cambio, me concentrara en revistas de segundo nivel (como las publicadas por Springer) para obtener un mejor retorno de la inversión por mis esfuerzos.

Supongo de buena fe que la mayoría de los editores no pueden rechazar artículos sin leerlos, pero ¿alguien está de acuerdo con la opinión de los profesores de mi departamento?

CHI utiliza una forma relajada de revisión doble ciego . Por supuesto, eso no hace que el sesgo interno sea imposible , pero al menos alienta a los revisores a leer los envíos reales.

Respuestas (6)

Es un prejuicio que se escucha a menudo en CS que muchas de las principales conferencias son "clubes de chicos" relativamente cerrados. De hecho, si uno revisa los documentos aceptados durante varios años, generalmente termina viendo las mismas afiliaciones una y otra vez, lo que fortalece esta impresión.

Sin embargo, esto podría deberse a una serie de razones (buenas o malas):

  • Los artículos de profesores/laboratorios que son bien conocidos en el campo pueden ser simplemente de una calidad técnica mucho mayor, por lo que es bastante natural que también sean aceptados con mucha más frecuencia.
  • Los profesores/laboratorios que son bien conocidos en el campo generalmente saben cómo escribir artículos para esta conferencia específica . Saben lo que valora el TPC y cómo presentar sus resultados de una manera que se aprecie en el campo. Como estos profesores suelen estar en el TPC, saben qué tipo de trabajos suelen ser aceptados y cuáles son rechazados.
  • Los profesores/laboratorios que son bien conocidos en el campo a menudo tienen una mejor comprensión del estado del arte existente en el campo, lo que les facilita identificar lo que es bueno y novedoso. En mi experiencia, los "forasteros" tienden a sobrestimar significativamente la novedad de sus contribuciones. Además, los laboratorios conocidos saben qué problemas están actualmente en boga en la comunidad.
  • Por supuesto, también es perceptible que los artículos de profesores/laboratorios conocidos no se juzguen tan críticamente. Por ejemplo, un lector puede muy bien pensar que un artículo no está aplicando una técnica dada correctamente, pero como el artículo proviene del grupo que inventó esta técnica, les da el beneficio de la duda y asume que conocerán la técnica mejor que ellos. a él. Probablemente no extendería el mismo pensamiento favorable a un extraño.
  • Finalmente, para algunos temas, es más fácil para algunos laboratorios hacer una buena investigación que para otros. Un ejemplo común son las pistas de búsqueda web en la conferencia WWW. Estas pistas generalmente requieren la validación de nuevos algoritmos en datos reales, a los que en su mayoría solo los laboratorios de la industria de Yahoo! etc. y sus colaboradores cercanos tienen acceso.

Tenga en cuenta que ninguna de estas razones es realmente política . De hecho, diría que todas las razones anteriores son significativamente más probables que un artículo sea rechazado por las razones que usted citó.

Asumo de buena fe que la mayoría de los editores no pueden rechazar artículos sin leerlos.

Diría que, en una conferencia importante como CHI, puede confiar en que su artículo al menos será revisado a fondo, sí.

pero ¿alguien está de acuerdo con la opinión de los profesores de mi departamento?

Bueno, dadas todas las razones anteriores, es bastante probable que su trabajo sea rechazado. Por definición, si una conferencia tiene una tasa de aceptación <20%, el rechazo siempre es una posibilidad real (claramente, sucede con la mayoría de las presentaciones). Sin embargo, me pregunto por qué sería mejor ni siquiera intentarlo si cree que su trabajo es lo suficientemente bueno para CHI. Si el documento es rechazado allí, aún puede volver a enviarlo a un lugar de nivel inferior y recibirá una serie de revisiones útiles. La única desventaja que veo es que prolonga el proceso de publicación medio año, pero si ve alguna posibilidad de que el artículo comience a ser aceptado en el lugar de primer nivel, creo que debería valer la pena.

Estoy de acuerdo; la actitud expresada por los profesores parece demasiado derrotista. ¿Qué pasó con el "intento universitario"?
@xLeitx: en su último párrafo afirma: > Bueno, dadas todas las razones anteriores, no es improbable que su artículo sea rechazado. Este triple negativo fue difícil de analizar para mí. Entiendo que no es lo mismo que decir "... de hecho es probable que su trabajo sea rechazado" y tampoco es lo mismo que "... de hecho no es probable que su trabajo sea aceptado" pero no es ¿No hay otra forma de expresarlo?
Un último aspecto que no se menciona aquí es el tema del alcance de una conferencia. Los revisores tienden a dar puntos extra por las cosas que les interesan (lo cual tiene sentido). Sin embargo, esto provoca un bucle de retroalimentación en el que las conferencias tienden a ser cada vez más restrictivas en cuanto al alcance. En una conferencia interdisciplinaria en la que participo, es una batalla constante mantener una variedad de áreas de investigación bien representadas, porque si el equilibrio de los intereses de los revisores va demasiado lejos en una dirección, la buena investigación en los otros lados queda marginada (por ejemplo, , excelentes trabajos relegados a carteles).
Buena respuesta. Al final del día, algunos lugares son simplemente ricos en recursos. Tienen personas talentosas y experimentadas, fácil acceso a datos y fondos, y un entorno de apoyo. Si no perteneces a estos lugares, lo hace más difícil o tu idea debe ser realmente sobresaliente o eclipsar a las de los jugadores de grandes ligas.
Por lo que vale, ninguna de las razones enumeradas aquí me parece demasiado "mala". Incluso el #4, que es un poco cuestionable a primera vista, se basa en la suposición de que "el grupo que inventó [una] técnica (...) conocerá la técnica mejor que [el revisor]" - y esa suposición, para mejor o peor, es probablemente simplemente cierto.

Habiendo servido en el comité de programa de CHI, en muchos otros comités de programa, y ​​habiendo sido presidente de programa de un par de otras conferencias de HCI, creo que sus profesores son demasiado cínicos.

En primer lugar, como señaló JeffE, CHI (y muchas otras conferencias) utilizan la revisión a ciegas o semi-ciega, por lo que al menos los revisores no saben de quién es el artículo que están revisando.

En segundo lugar, nunca he estado en una reunión del PC donde la identidad de los autores fuera un punto de discusión. Por supuesto, eso no significa que el presidente asociado (AC) del artículo no estuviera influenciado por quiénes eran los autores, pero ciertamente implicaría que no existe un sesgo institucionalizado a favor o en contra de autores o instituciones particulares.

Definitivamente no me preocuparía que sus documentos sean rechazados sin haber sido revisados; de hecho, cuando lo envíe, recibirá las revisiones para que sepa por qué su trabajo fue o no aceptado.

Si bien creo que todo esto es cierto, para hacer de abogado del diablo, diría que cualquier persona que conozca bien un campo a menudo puede inferir qué grupo (si no qué autores) escribió un artículo determinado. Hay ciertos temas de investigación o ventajas estratégicas (p. ej., conjuntos de datos patentados) por los que los grupos son conocidos. Sin embargo, estoy de acuerdo en que no he visto este impacto en las decisiones: a nadie le importa quién es el grupo o el investigador.

Estoy completamente de acuerdo con casi todo lo que escribió xLeitix, excepto la conclusión. Una cosa que no se abordó es por qué sus profesores le dijeron que no se presentara a CHI. Es posible que estén dando sus opiniones honestas, o que ellos mismos tengan un mal historial al enviar allí.

Pero también es posible que le estén diciendo que su trabajo no es lo suficientemente bueno para CHI, pero de una manera amable. Además, están familiarizados con el lugar en el que se encuentra en su trayectoria profesional y pueden creer que perder tiempo y esfuerzo en un intento fallido de CHI no es bueno para usted. Ambos requieren una perspectiva que no puedes tener sobre ti mismo.

En consecuencia, le sugiero que siga el consejo que le dieron.

Pero si sus profesores piensan que su trabajo no es lo suficientemente bueno para CHI, deberían decirlo directamente. Ser "amable" en realidad no te está haciendo ningún favor. Te mereces una valoración sin tapujos de tu trabajo. Exígelo.

Este tipo de consejo suele darse a la gente, pero en mi opinión es fundamentalmente erróneo.

Es cierto hasta cierto punto que muchas de las principales conferencias tienen una forma particular de hacer las cosas, y que las personas de la comunidad asociadas con una conferencia a menudo tendrán más experiencia con esa forma de hacer las cosas y les resultará más fácil lograr que se acepten artículos allí. Sin embargo, no es cierto que las comunidades asociadas con conferencias particulares sean una tienda cerrada: es totalmente posible adaptar su forma de hacer las cosas a lo que sabe que esperan las diferentes conferencias, y eso mejorará su tasa de aceptación en esas conferencias. Además, vale la pena hacer esto, porque publicar en las principales conferencias mejora enormemente tus posibilidades de tener una carrera académica exitosa (sin mencionar que te pone en contacto con una gran cantidad de buenos investigadores en tu campo).

En ese sentido, las personas que sugieren que evites las principales conferencias y simplemente envíes tu trabajo a lugares de segundo nivel te están perjudicando gravemente, porque básicamente se aseguran de que ni siquiera estés en el campo donde podrías. compita con sus pares (de hecho, el gran énfasis que los grupos principales ponen en publicar en las principales conferencias tiende a significar que se sienten decepcionados por las personas que no compiten). Si eres bueno y te esfuerzas lo suficiente, definitivamente puedes jugar en el nivel correcto, mientras que considerarte fuera del juego antes de que hayas intentado tener éxito es profundamente imprudente en mi opinión.

TL; DR Las personas que te dan este consejo te están desviando en mi opinión. No es aconsejable gastar su tiempo y energía enviando artículos a lugares que muchos investigadores considerarán menos que de primer nivel, cuando podría estar refinando sus artículos para asegurarse de que lleguen a los mejores lugares.

De manera más general, desafortunadamente, la gente tiende a dar consejos similares sobre todo tipo de cosas, no solo sobre conferencias académicas. Un ejemplo clásico sería postularse a la universidad o postularse para los mejores trabajos. La forma general de tal consejo tiende a ser:

  • Este lugar está sesgado contra usted específicamente, o contra personas como usted (lo que sea que eso signifique) en general.
  • Este lugar no te convendría si te aceptaran, lo disfrutarías mucho menos que en un lugar de nivel inferior.
  • De todos modos, este lugar no es tan bueno como parece, solo tienen una alta opinión de sí mismos.

Ciertamente, hay situaciones en las que las personas pueden ser un poco parciales, o en las que no disfrutaría de un lugar, o en las que el lugar no es tan bueno como cree que es, pero estas cosas no son universalmente ciertas. Si la gente le dice "no postule a X porque tengo evidencia específica y verificable de Y", entonces eso puede ser una cosa (verifique la "evidencia verificable"), pero si le dicen que no postule a los principales lugares en general , entonces necesitas cuestionarlo seriamente.

Otra buena respuesta. Mi única queja aquí es que hay todo un mundo (por así decirlo) de conferencias entre las conferencias de alto perfil con tasas de aceptación de alrededor del 20% mencionadas por el OP y "lugares que muchos investigadores descartarán de inmediato". No optar por las publicaciones insignia no significa automáticamente recurrir al "equivalente de conferencias de las revistas depredadoras".
@ORMapper: Sí, cierto, no estaba tratando de dar a entender que significaba eso (lo he editado en consecuencia). Sin embargo, muchos trabajos mencionan explícitamente publicaciones en conferencias importantes específicas, y publicar en conferencias de segundo nivel (aunque no depredadoras) definitivamente lo ayudará menos para ese tipo de trabajos.

Estoy de acuerdo con la respuesta de xLeitix y me gustaría profundizar en cómo algunos investigadores de alto perfil logran aparecer constantemente en ciertas conferencias de alto perfil.

Diría que el método para aparecer de manera confiable en una conferencia determinada son los recursos y el enfoque:

Primero, para el profesor X, la conferencia A no es simplemente otra conferencia. Es la conferencia "insignia" de su subcampo, su reunión "de origen". Harán y pueden esforzarse mucho para asegurarse de que se publiquen allí. Por lo tanto, no solo envían un trabajo. Se aseguran de tener al menos un artículo breve sobre cada una de sus mejores ideas para presentar. Con diez o más envíos, es probable que haya algunas aceptaciones, incluso con una tasa de aceptación baja.

En relación con eso, tenga en cuenta que el tema de la conferencia probablemente no sea solo el pasatiempo personal de X. Lo más probable es que tengan a su disposición todo un grupo de investigación especializado en el tema central de la conferencia. X probablemente ya esté involucrado en media docena de proyectos con diferentes miembros de su grupo en cualquier momento, todos los cuales son temáticamente adecuados para la conferencia A.

Por último, simplemente hay una fuerte superposición entre los temas de experiencia de X y los temas de A. Incluso si X, de alguna manera, no logra publicar en A, participará activamente de todos modos (lo que aumenta la impresión de que su nombre aparece todo el tiempo con respecto a A):

  • Pueden estar entre las sillas de A.
  • Pueden presidir una o más sesiones en A.
  • Se les podría invitar a dar una charla magistral en A.
  • Podrían ofrecer un taller en el mismo lugar que A. Tenga en cuenta que, incluso sin que suceda nada cuestionable, esto podría llevar a un cierto sesgo adicional hacia las contribuciones del grupo de X: Si bien es menos frecuente para los talleres en conferencias muy grandes, los talleres a menudo dependen en gran medida de marketing boca a boca. Como consecuencia, es más probable que las personas cercanas a X conozcan el taller y su enfoque preciso.
  • Como miembro bien conocido de la audiencia cuyo trabajo está siendo desarrollado por otros envíos a A, es posible que se los mencione en algunas de las charlas. Esto puede suceder en comentarios totalmente informales: "El año pasado, Alice, que está sentada allí, presentó la técnica Y y le preguntó a Z, así que he estado investigando a Z".

E incluso si todo esto falla, X seguirá asistiendo a A y atraerá suficiente atención durante las pausas para el café para reforzar el recuerdo: X volvió a ser parte activa de A.

La política está en todas partes, por supuesto, especialmente en situaciones donde el recurso que se entrega a la gente es limitado. ¡Tenga en cuenta que eche un vistazo al comité del programa antes de enviarlo! ¡Y por favor no se limite a una sola conferencia! Incluso algunos profesores conocidos son rechazados en algunas conferencias, y mucho menos en otras.