¿Referencias/recursos sobre problemas relacionados con la revisión por pares en física?

Estaba viendo este video en YouTube ( esta es la segunda parte) y me motivó a hacer esta pregunta.

De los vídeos:

....ese es el aspecto bueno de la revisión por pares. Debería funcionar para descartar problemas con la interpretación, problemas con los resultados. Debería funcionar para mejorar un papel. El problema es que... hay un gran volumen de cosas y cada vez estamos más inundados. .... aquí está uno de los peores ejemplos de donde la revisión por pares ha fallado por completo. ....

Los ejemplos de los que habla se analizan en esta publicación de blog .

ingrese la descripción de la imagen aquí

Cuando hace zoom, puede ver claramente que está retocado.

...esta es una de las revistas mejor clasificadas en los campos...

Ahora, aquí está el aspecto realmente problemático... si lo hubieran hecho mejor (puedes ver una imagen retocada mucho mejor en el blog), cómo lo sabríamos. No solo se gasta dinero en ese laboratorio, otros grupos lo perseguirían y ese es el aspecto preocupante y crece y crece. La ciencia es así.

En el pasado, si los árbitros no lo recogían, ese era el final de la historia. Ahora tenemos algo llamado revisión por pares posterior a la publicación. Hay sitios ( PubPeer ) y hay blogs ( ChemBark , Chemistry Blog ) donde la gente sube un artículo y dice "bueno, parece un gran artículo" o, en muchos casos, dice "hay algo que no entiendo del todo aquí" y eso lleva a muchos comentarios de personas en el campo y creo que aquí es donde estamos evolucionando hacia... lejos del sistema tradicional de revisión por pares. La publicación se ve como el inicio del proceso científico y no el final, donde se genera debate.

Mis preguntas:

¿Existen otros ejemplos similares en la física? ¿Puede indicarme un blog/sitio o algo por el estilo que trate estas cosas?

¿Existen blogs, artículos o ensayos que analicen los problemas relacionados con el proceso de revisión por pares (en relación con la física)? ¿Cómo se puede mejorar, donde se discuten métodos alternativos como la revisión posterior a la publicación? Sé ChemBark para química, estoy buscando su "equivalente" en física.

Puede encontrar un 'equivalente' matemático de esta pregunta aquí mathoverflow.net/questions/176372/proof-correctness-problem
También te puede interesar Retraction Watch , que en principio es multidisciplinar, pero suele tener trabajos de biología y química, en su mayoría.
¡Bienvenido Oso Panda! He editado la pregunta sobre la revisión por pares posterior a la publicación, ya que requerimos una pregunta por publicación y esa parece ser independiente del resto de la publicación. Publíquelo como una pregunta separada si todavía está interesado.
El más (in) famoso de estos en física es Jan-Hendrik Schon, quien obtuvo ~ 10 artículos en Nature/Science hasta que finalmente alguien encontró varias imágenes reutilizadas. Se escribió un libro bastante agradable, Plastic Fantastic, sobre el caso. Secundo la recomendación de RetractionWatch, que sigo demasiado. Creo que fingir en física es menos común, ya que a menudo necesitas respaldar tus afirmaciones teóricamente. Dicho esto, es muy fácil encontrar datos defectuosos debido a la incompetencia (sin intención maliciosa, solo la presión de publicar o perecer). La mayoría no quiere ridiculizar públicamente tal investigación.
Puede leer solo la categoría de física en Retraction Watch si lo desea: retractionwatch.com/category/by-subject/…
Después de leer la reseña del libro Plastic Fantastic (de Eugenie Samuel Reich), creo que es algo adecuado para mi gusto.
El "asunto Sokal" también puede ser esclarecedor: un profesor de física.
@MarkJ Eso no tiene nada que ver con la física, se trata más del posmodernismo y las oscuridades, la falta de rigor intelectual, etc., asociadas con él. No obstante es muy interesante.
@MarkJ "problemas que rodean la revisión por pares EN FÍSICA"
Recientemente ha habido un par de retractaciones de alto perfil de artículos de Majorana que podrían servir como un estudio de caso de cómo la revisión posterior puede funcionar en física.

Respuestas (2)

Los métodos de mala conducta científica en física no son diferentes de lo que se ve en chembark (photoshopping, creación de datos, etc.). El premio nobel de química de este año fue para un físico, como sucedió a menudo. La superposición metodológica es enorme, en su mayoría el enfoque temático es diferente, la colaboración es frecuente como la interdifusión de académicos entre ambas ramas. Además, la física es un campo tan amplio que el papel de la revisión por pares en diferentes subcampos tiene una importancia diferente.

Jan Hendrik Schön fue un caso excepcional, del que se pueden deducir las diferencias en la revelación de malas conductas científicas y el papel de la revisión por pares en física frente a otras ramas científicas. No hay muchos casos como el de Jan Hendrik Schön en física, ya que tenemos un sistema de revisión posterior a la publicación muy sólido en física/química del que carecen muchas ramas científicas: la industria y la interdependencia matemática y experimental y la superposición de la mayoría de las teorías en subcampos vecinos.. Es más fuerte que el sistema de revisión por pares a nivel de revista y una de las razones por las que la física se llama "ciencia dura". Esta es realmente la diferencia crucial con otras ramas científicas y la razón por la cual no encontrará mucha mala conducta científica importante por parte de los físicos en las principales revistas. La contratación de los mejores investigadores por parte de la industria y las patentes son un fuerte incentivo para evitar la mala conducta científica. Y la mejor investigación en física es una investigación correcta, reproducible y valiosa, en ramas como la psicología o la filosofía realmente tienes problemas para identificar y juzgar una buena investigación con criterios claros.Esto se debe a la naturaleza de los temas. La carrera de investigación de Jan Hendrik Schöns terminó, nunca volverá a hacer investigación fundamental ni a escribir un artículo. Probablemente sabía que era solo cuestión de tiempo, considerando la importancia de sus resultados, que alguien en la academia o la industria revelara su mala conducta, probablemente obsesionado con su carrera y ciego.

El caso de Schön inició en la comunidad de física una discusión abierta sobre si la revisión por pares a nivel de la revista es el lugar para detectar tales casos, no había muchos casos generalizados como este antes (no recuerdo). De las discusiones que tuve, parece que la mayoría de los físicos estuvieron de acuerdo en que el problema en este caso no era la revisión por pares a nivel de revista, sino la falta de revisión de sus colaboradores antes de la presentación. Desafortunadamente, después fue el único sentenciado y perdió su doctorado en 2013. Observe cuántos coautores tuvo en la mayoría de los artículos. Los otros colaboradores de Schön fueron absueltos de todo delito por un comité designado por Bell Labs. Actualmente son profesores en ETH Zürich y Stanford. ¿No podrían identificar los datos fraudulentos o tendrían que invertir mucho esfuerzo?

A esto se reduce, ¿cuánto esfuerzo tiene que invertir en la revisión por pares y cuál es el status quo de confianza y desconfianza en su subcampo? ¿Prevalece la desconfianza? Para algunas ramas, el statu quo es problemático. En física podemos tolerar tal caso de revisión por pares imperfecta a nivel de revista de vez en cuando debido a otros mecanismos inherentes mucho más fuertes de los que carecen otras ramas científicas. El subcampo de priming en psicología, por ejemplo, tuvo que pasar por procesos bastante excepcionales para recuperar credibilidad y tendrá que seguir haciéndolo.

Por supuesto, también otras ramas desarrollan ideas tecnológicas relevantes, prototipos, patentes y son financiadas por la industria, pero el punto crucial es que los resultados que a menudo se publican en revistas de física se convierten en un producto en una década. Esta escala de tiempo es importante, ya que tiene fuertes implicaciones en la calidad del trabajo de los físicos experimentales, como ha demostrado el caso de Jan Hendrik Schön.En otras ramas científicas, por ejemplo, la psicología, casi nunca debe temer este tipo de revisión posterior a la publicación muy fuerte (donde los experimentadores de la industria y la academia intentarán analizar y reconstruir su experimento poco a poco, mucho más fuerte que cualquier revisión de un editor). o colaboradores) o descubrimiento-idea-patente-producto durará varias décadas (por ejemplo, desarrollo de fármacos en medicina), casi tanto como la carrera de la mayoría de los académicos y algunos deciden correr este riesgo. En física/química, para temas de investigación interesantes y ampliamente estudiados, su probabilidad es cero, la mala conducta a largo plazo (lo que significa 10, máx. 20 años) es kamikaze científico.

No interprete mis palabras como una subestimación de la revisión por pares realizada a nivel de revista (en campos que no son relevantes para la industria, es el nivel más importante), soy un firme defensor del acceso abierto y los datos abiertos y, en mi opinión. El mejor obstáculo para la mala conducta científica sería si los motores de búsqueda como Google Scholar vincularan directamente los comentarios sobre arxiv con artículos específicos en los resultados de búsqueda. Si un grupo de coautores decide falsificar datos profesionalmente (no como un niño de escuela en la imagen de arriba), entonces solo otros grupos de investigación que intenten reproducir estos resultados pueden revelar la mala conducta, revisión posterior a la publicación. En física esto sucederá con seguridad. En retractionwatch puede leer historias sobre revistas que no están dispuestas a publicar comentarios de otros autores que demuestren la mala calidad de su revisión por pares. En física, los comentarios siempre han sido una parte vital para la discusión pública de modelos teóricos y datos experimentales en competencia. Pero hoy en día las editoriales confían más en un modelo más orientado a las ganancias que hace décadas. Por lo tanto, los sitios web centrales sin censura como pubpeer son realmente necesarios desde mi punto de vista, ya que hay un aumento del plagio y la mala conducta, aunque su importancia puede variar mucho de una rama a otra. La física, en mi opinión, no está en problemas, en realidad, la escala de tiempo descrita anteriormente se ha vuelto aún más corta desde el surgimiento de Internet debido a un mejor y más rápido acceso al software, los datos y el conocimiento. Desafortunadamente en humanidades el fenómeno de "copiar, agitar, pegar" viceversa Pero hoy en día las editoriales confían más en un modelo más orientado a las ganancias que hace décadas. Por lo tanto, los sitios web centrales sin censura como pubpeer son realmente necesarios desde mi punto de vista, ya que hay un aumento del plagio y la mala conducta, aunque su importancia puede variar mucho de una rama a otra. La física, en mi opinión, no está en problemas, en realidad, la escala de tiempo descrita anteriormente se ha vuelto aún más corta desde el surgimiento de Internet debido a un mejor y más rápido acceso al software, los datos y el conocimiento. Desafortunadamente en humanidades el fenómeno de "copiar, agitar, pegar" viceversa Pero hoy en día las editoriales confían más en un modelo más orientado a las ganancias que hace décadas. Por lo tanto, los sitios web centrales sin censura como pubpeer son realmente necesarios desde mi punto de vista, ya que hay un aumento del plagio y la mala conducta, aunque su importancia puede variar mucho de una rama a otra. La física, en mi opinión, no está en problemas, en realidad, la escala de tiempo descrita anteriormente se ha vuelto aún más corta desde el surgimiento de Internet debido a un mejor y más rápido acceso al software, los datos y el conocimiento. Desafortunadamente en humanidades el fenómeno de "copiar, agitar, pegar" viceversa en realidad, la escala de tiempo descrita anteriormente se ha acortado aún más desde el surgimiento de Internet debido a un acceso mejor y más rápido al software, los datos y el conocimiento. Desafortunadamente en humanidades el fenómeno de "copiar, agitar, pegar" viceversa en realidad, la escala de tiempo descrita anteriormente se ha acortado aún más desde el surgimiento de Internet debido a un acceso mejor y más rápido al software, los datos y el conocimiento. Desafortunadamente en humanidades el fenómeno de "copiar, agitar, pegar" viceversaparece haber subido.

Vea el comentario en mi respuesta a continuación.
¡mmm interesante! Lo siento por la respuesta tardía... parece que no obtuviste la recompensa...

Me gustaría discrepar un poco con la respuesta de Hauser con respecto a los posibles métodos de mala conducta científica en física.

Desafortunadamente, en partes más teóricas de la física, algunas personas pueden arreglárselas para fingir que una tontería total y absoluta representa un nuevo resultado lo suficientemente bien como para engañar a los árbitros y editores y, por lo tanto, vencer al sistema de revisión por pares.

Un ejemplo destacado de este (para nuestra suerte, muy raro, al menos AFAIK) fenómeno es el caso Bogdanov , véase también, por ejemplo, la página web de John Baez sobre esto y el artículo de Nature sobre el escándalo posterior; una muestra de los trabajos involucrados está disponible a través de esta consulta de Google Scholar . Los hermanos Bogdanov (también conocido como Bogdanoff) obtuvieron sus doctorados utilizando los artículos en cuestión, uno en física y otro en matemáticas, y a principios de la década de 2000 publicaron una serie de artículos extraños, por decirlo suavemente, en una serie de revistas de física de renombre, incluyendo Classical and Quantum Gravity y Annals of Physics (y, por ejemplo, el artículo de Annals of Physics todavía está allí-- no se retira hasta hoy). Los documentos no solo estaban equivocados, sino que resultaron ser un completo galimatías.

A la luz del caso Bogdanov, no es una gran sorpresa que a veces la revisión por pares tampoco detecte un plagio realmente a gran escala, como en el caso infame de más de 60 trabajos de un grupo de físicos turcos que plagiaron trabajos anteriores, consulte, por ejemplo, el artículo de Nature y esta publicación en el blog de Peter Woit para obtener más detalles.

A diferencia del caso de Jan Hendrik Schön, AFAIK los artículos de los hermanos Bogdanov no involucraron datos experimentales ni predijeron los resultados de experimentos razonablemente factibles, por lo que su caso es prácticamente un fracaso de revisión por pares a nivel de árbitros y editores (y por supuesto un fracaso de sus directores de tesis también).

En mi humilde opinión, el asunto Bogdanov muestra que el argumento sobre ir a producción y revisión posterior a la publicación de la respuesta de Hauser no parece funcionar bien en las partes más teóricas de la física, especialmente cuando los autores no hacen predicciones experimentales fácilmente verificables.

En cualquier rama científica puedes "superar el sistema de revisión por pares", pero el punto es que en física no pasa desapercibido por mucho tiempo, por lo que pierdes tu carrera científica. Y es por eso que no sucede muy a menudo. Incluso las cosas puramente especulativas de estos gemelos en las que ningún experimentador está interesado fueron detectadas y desacreditadas. Ahora, deducir y afirmar de esto que los mecanismos que describí no funcionan para >90% de la física teórica debido a este único caso es una conclusión totalmente errónea. Creo que o malinterpretaste mi respuesta o no la leíste completamente. La colaboración de los teóricos
y experimentalista es esencial para la física. La teoría del Big Bang es para la televisión, donde estos dos payasos también terminaron dailymail.co.uk/news/article-1279525/… Nunca escuché que hicieran física durante 15 años :)
@Hauser: Mi punto es un poco más sutil y todavía no veo cómo su argumento lo derrota: si algunas personas publican un artículo incorrecto (o un galimatías como en el caso de Bogdanov) no hacen predicciones verificadas experimentalmente, el hecho de que su trabajo es incorrecto puede desaparecer desapercibido durante bastante tiempo. Si mal no recuerdo, la comunidad tardó mucho más en desacreditar el caso Bogdanov que el caso Schon. Entonces, en mi humilde opinión, la revisión posterior por pares, etc., funciona lo suficientemente bien solo para que los artículos que hacen afirmaciones (ya sean teóricas o experimentales) sean interesantes (de hecho, lo suficientemente sensacionales) para que las personas los verifiquen. ...
@Hauser: ... Así que me temo que hay una cierta cantidad de artículos erróneos, incomprensibles o plagiados con resultados comunes (en lugar de sensacionalistas, como en el caso de Schon) que pueden pasar la revisión por pares y pasar desapercibidos por un tiempo bastante largo.
Responda la pregunta ( así es como funciona la revisión en física ) e intente ver la imagen completa en esta rama, lo que dice se aplica a todas las demás ramas científicas, donde muchos más artículos son pobres y poco interesantes y aún podría encontrar docenas de tales casos. investigando _ Este "asunto" terminó después de unos años . Muéstrame otros casos similares a Bogdanov/Schön que fueron desacreditados después de 20 años en física entrelazada teórico-experimental y no basen una sospecha en
Nunca se ha oído hablar del caso único de dos payasos en la comunidad de física, aparte de la especulación vudú del big bang, una docena de "investigadores" podrían estar interesados . Su respuesta es un comentario extenso que malinterpreta mi respuesta y afirma cosas que nunca dije. ¿Qué estás tratando de decir? Que uno puede poner un artículo sobre la teoría del vudú del big bang a través de la "revisión por pares" de revistas de tercera clase y, por lo tanto, la mayor parte de la física teórica está fuertemente interrelacionada con la exp. la física tiene una revisión por pares y posterior a la publicación que no funciona
¿sistema? ¿Grave? Todos los niños saben que no puede haber un sistema perfecto de revisión por pares a nivel de revista que evite casos como este en cualquier rama científica, incluso la física tiene editores de revistas corruptos y revisores deficientes, sin embargo, debe explicar por qué esta rama tiene tanto éxito, progreso y conocimiento científico en comparación con ramas con revisión por pares mediocre y ninguna revisión posterior a la publicación. Haces una montaña de un grano de arena desacreditando todo este campo con una sospecha, sin estar ni siquiera equivocado por un razonamiento falso, aunque di muchos argumentos y enlaces que aparentemente no diste.
leer. En otras ramas de STEM, más del 70% de los resultados ni siquiera se pueden reproducir, en informática, la gente ha escrito bots para fabricar artículos y fueron aceptados... ¿Cómo se compara esto con la física y por qué no tenemos tales problemas en esta rama?
El OP solicitó ejemplos de problemas relacionados con la revisión por pares en física, y proporcioné un ejemplo que responde exactamente a la pregunta del OP, eso es todo :)
Parece inútil contigo. Has leído un solo artículo de wiki, un solo caso de dos payasos, lo generalizas y afirmas que uno puede publicar tales tonterías en cualquier parte de la física teórica. Esa es exactamente la forma opuesta en que los científicos llegan a su conclusión. Pero no se preocupe, este sitio ahora está lleno de estudiantes de primer semestre con nombres de payasos que ponen sus tonterías 2 centavos sin experiencia en cada pregunta. Sigue intentando aprender...
hmm no sabía sobre el caso Bogdanov. ¡Bastante interesante!
@PandaBear: Gracias. Por cierto, aquí están los enlaces a una historia interesante de una falla de revisión por pares en matemáticas: arxiv.org/abs/0709.1291 y especialmente arxiv.org/tb/0709.1291 .