Hoy en día, la revisión por pares se considera un requisito indispensable para la publicación formal. Como resultado, las revistas necesitan establecer políticas apropiadas de revisión por pares, así como enfoques para reclutar revisores por pares.
La revisión por pares tiene como objetivo evaluar la idoneidad de un envío para su publicación. Lo entregan expertos en el campo del envío, quienes deben ser identificados por el personal editorial. Diferentes revistas y editores tienen diferentes expectativas sobre el papel de los revisores, por lo que es esencial una orientación clara. En particular, los autores tienden a preferir una revisión rápida por pares, ya que esto significa que su trabajo se publica rápidamente. Sin embargo, la presión de tiempo sobre los revisores pares puede comprometer la calidad de sus aportes. Como resultado, las revistas tienen la responsabilidad de mantener en equilibrio la velocidad y la calidad de la revisión por pares, para garantizar que los artículos publicados sean de alto nivel.
El hecho de que un envío se considere adecuado para su publicación depende de los criterios de selección de artículos de la revista así como sobre la calidad e integridad de la investigación que se describe. Por ejemplo, se puede pedir a los revisores pares que se centren en el rigor metodológico, la novedad, el compromiso con las prácticas de becas abiertas o cualquier otro criterio establecido por el personal editorial.
Enfoques para la revisión por pares
La revisión por pares se puede realizar de diversas formas, cada una de las cuales tiene sus respectivos méritos. Es responsabilidad del comité editorial elegir un enfoque adecuado, considerando las siguientes dimensiones:
Dimensión | Consideraciones clave |
---|---|
Número de revisores | |
Interacción entre revisores |
|
Identificación de autores y revisores |
|
Publicación de informes de revisión por pares (también conocida como revisión por pares transparente o abierta |
|
El uso de herramientas de revisión automatizadas, aunque las revistas deben tener en cuenta que éstas sólo pueden detectar problemas básicos (por ejemplo, plagio, declaraciones de intercambio de datos, identificadores de reactivos). Al utilizar inteligencia artificial, estas herramientas pueden ayudar a reducir la carga de trabajo de los editores y revisores, aunque las investigaciones en curso han puesto de relieve posibles preocupaciones en torno al sesgo computacional. Como resultado, las herramientas de revisión automatizadas no deben usarse para tomar decisiones automáticamente sobre los envíos recibidos, sino sólo para informar el proceso de revisión por pares.
¿Cómo elegir a los revisores pares?
Identificar revisores es un desafío complejo, ya que los investigadores suelen estar muy ocupados y la cantidad de artículos que necesitan revisión anualmente crece más rápidamente que el grupo de revisores disponibles. Las siguientes estrategias pueden ayudar a identificar a los revisores pares:
- Pedir a los autores que proporcionen sugerencias
- Verificar las referencias en la presentación o herramientas automatizadas para identificar investigadores en áreas similares.
- Usar redes personales, incluidas las de los editores, los comités editoriales y los autores anteriores y editores invitados.
- Invitar a revisores anteriores
- Pedir a los revisores rechazados que proporcionen sugerencias para candidatos alternativos
Hoy en día, existen desequilibrios en la revisión por pares, lo que contribuye a las dificultades para encontrar revisores y a la sobrecarga de una pequeña muestra de revisores (Kovanis et al., 2016). Además, diversificar a los revisores en términos de género, región u otras características personales puede tener un impacto positivo (Murray et al., 2019).
Limitaciones de la revisión por pares
Actualmente, no existe evidencia confiable de que la revisión por pares contribuya significativamente a la calidad general de la literatura científica. Sin embargo, esta falta de evidencia no indica que la revisión por pares sea perjudicial o deba evitarse, sino que simplemente señala la necesidad de realizar más investigaciones sobre los sistemas de revisión por pares establecidos e innovadores.
Las preocupaciones importantes sobre la revisión por pares incluyen el bajo acuerdo entre los revisores, el hecho de que están sujetos a sesgos y que la revisión por pares puede consumir mucho tiempo.
Finalmente, los revisores pares sólo pueden abordar la calidad de un manuscrito, no la de la investigación subyacente. Algunas revistas están considerando otros métodos de garantía de calidad, como la evaluación de la reproducibilidad o replicabilidad, junto con la revisión por pares (por ejemplo, la American Economic Association), aunque esta sigue siendo una práctica limitada. El requisito de una declaración de disponibilidad de datos y el intercambio de datos como parte de las políticas editoriales es una forma útil de permitir actividades como comprobaciones de reproducibilidad o replicabilidad.
Manipulación del proceso de publicación
El Comité de Ética de la Publicación define las «fábricas de artículos» como individuos, grupos u organizaciones que tienen como objetivo manipular el proceso de publicación para obtener ganancias financieras. Estos actores persiguen la presentación fraudulenta, la revisión por pares y la publicación de artículos que, en la mayoría de los casos, son incorrectos y no surgen de esfuerzos de investigación genuinos. Identificar la actividad de la fábrica de artículos es complejo, ya que estos artículos están diseñados para engañar a todas las partes interesadas involucradas en el proceso de publicación, así como a los lectores. A menudo, los artículos fraudulentos sólo se detectan después de su publicación, ya que las inquietudes en varios artículos pueden comenzar a aparecer como un patrón coherente. En estos casos, los editores deben recopilar información, documentación y datos de los autores para informar los próximos pasos.
Tratar con fábricas de artículos crea una carga administrativa importante. Por lo tanto, se recomienda a las revistas que cuenten con orientaciones y procesos claros, así como que operen de manera transparente y compartan información con otros editores (y, potencialmente, con la institución del autor) según corresponda. Cualquier aviso de retractación aplicado a artículos identificados como provenientes de una fábrica de artículos también debe ser transparente y claro. Durante todo el proceso de investigación de la actividad de las fábricas de artículos, las revistas y los editores deben respetar la confidencialidad, ya que existe un alto riesgo de dañar involuntariamente la reputación de un autor, incluso cuando las reclamaciones o inquietudes eventualmente puedan resolverse o quedar sin financiación.
- Song, E., Ang, L., Park, J.-Y., Jun, E.-Y., Kim, K. H., Jun, J., Park, S., & Lee, M. S. (2021). A scoping review on biomedical journal peer review guides for reviewers. PLOS ONE, 16(5), e0251440.
- Bornmann, L., Mutz, R., & Daniel, H.-D. (2010). A Reliability-Generalization Study of Journal Peer Reviews: A Multilevel Meta-Analysis of Inter-Rater Reliability and Its Determinants. PLoS ONE, 5(12), e14331.
- Dance, A. (2023). Stop the peer-review treadmill. I want to get off. (Nature 614, 581-583). Nature.
- Huber, J., Inoua, S., Kerschbamer, R., König-Kersting, C., Palan, S., & Smith, V. L. (2022). Nobel and novice: Author prominence affects peer review. Proceedings of the National Academy of Sciences, 119(41), e2205779119.
- Checco, A., Bracciale, L., Loreti, P., Pinfield, S., & Bianchimani, G. (2021). Can AI be used ethically to assist peer review?. Impact of Social Sciences Blog.
- Editor resources Taylor and Francis. (n.d.). How to find peer reviewers – an editor’s guide.
- Kovanis, M., Porcher, R., Ravaud, P., & Trinquart, L. (2016). The Global Burden of Journal Peer Review in the Biomedical Literature: Strong Imbalance in the Collective Enterprise. PLOS ONE, 11(11), e0166387.
- Murray, D., Siler, K., Larivière, V., Chan, W. M., Collings, A. M., Raymond, J., & Sugimoto, C. R. (2018). Author-Reviewer Homophily in Peer Review. BioRxiv, 400515.
- Office of the American Economic Association Data Editor. (n.d.).
- COPE Council. (2019). COPE Supplemental guidance — Addressing concerns about systematic manipulation of the publication process — English.
- COPE. (n.d.). Webinar 2022: Managing paper mills. Committee on Publication Ethics.
- Aczel, B., Szaszi, B., & Holcombe, A. O. (2021). A billion-dollar donation: estimating the cost of researchers’ time spent on peer review. Research Integrity and Peer Review, 6(1).
- Amaral, O. B. (2022). To fix peer review, break it into stages. (Nature 611, 637). Nature.
- Brainard, J. (2021). The $450 question: Should journals pay peer reviewers? Science.
- Carneiro, C. F. D., Queiroz, V. G. S., Moulin, T. C., Carvalho, C. A. M., Haas, C. B., Rayêe, D., Henshall, D. E., De-Souza, E. A., Amorim, F. E., Boos, F. Z., Guercio, G. D., Costa, I. R., Hajdu, K. L., van Egmond, L., Modrák, M., Tan, P. B., Abdill, R. J., Burgess, S. J., Guerra, S. F. S., … Amaral, O. B. (2020). Comparing quality of reporting between preprints and peer-reviewed articles in the biomedical literature. Research Integrity and Peer Review, 5(1).
- Chubb, J., Cowling, P., & Reed, D. (2021). Speeding up to keep up: exploring the use of AI in the research process. AI & SOCIETY, 37(4), 1439–1457.
- Eisen, M. B., Akhmanova, A., Behrens, T. E., Diedrichsen, J., Harper, D. M., Iordanova, M. D., Weigel, D., & Zaidi, M. (2022). Peer review without gatekeeping. ELife, 11. CLOCKSS.
- Royal Society of Chemistry. (n.d.). Joint commitment for action on inclusion and diversity in publishing.
- Singh Chawla, D. (2022). Should AI have a role in assessing research quality? Nature.