Archivo de la etiqueta: Revisión científica

Un 15% de las revisiones científicas de las revistas denuncias hechas por Retraction Watch son fraudulentas

 
 

Basado en

Academic journals are facing a battle to weed out fake peer reviews. By Aja Romano. The Daily Dot – Aug 21, 2015, 8:30am

 

Cada vez son más las estafas que están enmascarando publicaciones que no lo son como revistas científicas que requieren del pago para aceptar y publicar trabajos sin ningún tipo de revisión por pares. Estas revistas son generalmente fáciles de detectar. Pero ahora hay un nuevo problema: el propio proceso de revisión por pares está siendo «hackeado» gracias a los servicios de terceros a los que se paga para fabricar falsas revisiones por pares.

La condición sine quanum para que consideremos que una revista es científica es que haya sido sometida a un proceso de revisión por parte de expertos o pares. El proceso de revisión por pares es crucial para la integridad de las publicaciones académicas, y es una tarea clave para asegurar que la información que se publica se ha examinado a fondo y es lo más precisa posible. Si una revista afirma que los documentos que publica son revisadas por expertos, se supone que este hecho proporciona  a los lectores un grado de confianza de que un grupo de expertos ha evaluado los contenidos que se publican en la misma, y que han pasado un examen concienzudo.

El proceso de revisión científica da validez como tal a una investigación, el desarrollo del proceso de revisión lo lleva a cabo el comité científico de la revista o publicación. El comité científico en general es designado por el editor de la revista entre aquellos expertos más cualificados o con mayor experiencia en ese área de conocimiento.  Cuando un autor envía un original a una revista, el editor designa a dos o tres de esos expertos para que revisen la calidad de la publicación; normalmente este proceso se lleva a cabo por lo que se denomina doble ciego; es decir los revisores no saben quién es el autor de la publicación y a la viceversa, el investigador desconoce quienes son los que hacen la revisión de su publicación. Cuando el comité científico emite el juicio de evaluación normalmente se dan tres posibilidades.

1. Publicación del artículo sin modificaciones

2. Aceptación del artículo con modificaciones

3. Rechazo

En resumen los revisores analizan la metodología de investigación utilizada en el trabajo y hacen sugerencias para mejorar y optimizar la calidad de lo publicado. También pueden optar por rechazar un trabajo si la investigación es poco sólida. y como vimos anteriormente los revisores normalmente no tienen contacto directo con los investigadores, si no que les comunican sus comentarios, críticas y preocupaciones por medio de los editores de la revista, sea directamente o a través de la plataforma de la revista (OJS), que luego son quienes deciden finalmente si aceptan o no el documento para su publicación en base al consenso respecto al juicio emitido por aquellos otros. En el caso de que haya una diferencia fuerte de criterio entre ambos revisores se designa a un tercero.

La presencia de entidades falsas que fingen validar la investigación no es nuevo en el mundo académico, pero en los últimos años  con el auge del libre acceso, los falsos informes de investigación fraudulenta han ido siendo objeto cada vez de más atención. El hecho de que el nombre del revisor asignado a un trabajo suene legítimo no quiere decir que en realidad lo sea. Según una noticia aparecida esta semana en The Dai ly Dot, no es ningún secreto que cualquiera puede fingir casi todo en Internet: referencias falsas de trabajos, noticias falsas, falsas audiencias, falsas credenciales académicas y ciencia falsa. Incluso las revistas universitarias que distribuyen importantes investigaciones de universidades de todo el mundo comienzan a ser objeto de estos mismos tipos de influencias, ya que en los últimos años es bastante frecuente encontrar revistas evaluadas por falsos revisores que proliferan en el mundo académico, según Retraction Watch una página web dedicada a la vigilancia científica al menos un total de 250 revistas de este tipo han sido denunciadas en los últimos tres años.

La tendencia reciente que permite a los autores del original e incluso a los propios revisores recomendar a otros investigadores para hacer revisiones por pares de su trabajo ha sido en parte el factor desencadenante de la corrupción en el sistema. En algunos casos incluso se está produciendo el robo de identidad, ya que los pares falsos suelen utilizar nombres de importantes científicos pertenecientes al área de investigación del documento a revisar, sin que los verdaderos científicos sepan que su identidad ha sido robada y está siendo utilizada para la emisión de opiniones falsas sobre una investigación a evaluar.

El proceso está mucho más extendido de lo que podríamos creer en un principio. El número total de documentos con revisiones por pares falsos desde 2012 sólo representa el 15 por ciento del número total de las denuncias hechas por Retraction Watch, una cifra relativamente importante respecto a miles de artículos científicos que se publican cada año en el que además se han visto implicadas importantes firmas editoriales. En el último año la revista Nature informó que parte de su plataforma, un software de gestión y publicación de servicios llamado ScholarOne, había sido utilizado para enlazar a más de un centenar de cuentas falsas de falsos revisores, las cuales redirecionaban  de nuevo a un único autor en Taiwán. Incluso sistemas tan sólidos como el de Elsevier también son vulnerable, aunque se sabe que esta importante editorial está trabajando para no permitir a los usuarios agregar cuentas fraudulentas, o hackear cuentas de editores y asignarlas a  colaboradores fraudulentos.

La buena noticia es que a medida que han ido apareciendo falsas revisiones científicas también lo han hecho los sitios de vigilancia que identifican revistas que ofrecen revisiones por pares falsos, e incluso en algunos casos de estafas por parte de revisores reales que ofrecen a los autores buenas críticas a cambio de dinero para crear reseñas falsas.

Todo esto tiene importantes daños colaterales para muchos autores, ya que muchos de los trabajos de investigación que aparecen en estas revistas fraudulentas son legítimos, y sus autores no tienen nada que ver con el falso proceso de revisión por pares, de modo que estos autores son víctimas de esta pantomima de sistema de revisión por pares, y una vez que sus documentos se retraen, será muy difícil para ellos volver a dar a conocer los resultados de su trabajo legítimos de investigación.

 

Alternativas a la revisión por pares en la financiación de proyectos

peer_review

Guthrie, S., B. Guérin, et al. [e-Book]  Alternatives to Peer Review in Research Project Funding. Santa Monica, CA, RAND, 2013

Descargar

Este documento proporciona una visión general de una serie de alternativas a revisión por pares para evaluar las solicitudes de financiación de la investigación , y es una actualización y ampliación de 2011 el informe de RAND Europa sobre Alternativas a revisión por pares en la Investigación-Financiación del proyecto (TR-1010-DH). Está destinado a ser utilizado como una herramienta por quienes financian la investigación para ayudar a desarrollar un enfoque más adecuado para la financiación de sus necesidades específicas de investigación . Esta actualización incluye un nuevo marco para la consideración de revisión por pares y seis nuevos ejemplos de posibles alternativas a los aspectos específicos del enfoque de evaluación por pares : la excelencia sin restricciones, la financiación condicionada, a través de un mentor , puntuación,  iterativo y al azar.

Este documento ha sido elaborado por la unidad de investigación del Departamento de RAND Europe’s Department of Health-funded Policy Research in Science and Medicine (PRiSM). PRiSM pretende proporcionar la investigación, el análisis y el asesoramiento para apoyar la aplicación efectiva a la mejor estrategia para la investigación y para apoyar la toma de decisiones más amplia en el sector de la investigación en salud. Este es un informe independiente encargado y financiado por el Programa de Investigación de Políticas del Departamento de Salud. Los puntos de vista expresados ??no necesariamente son los del Departamento. RAND Europe es un instituto de investigación política sin fines de lucro independiente que forma parte de la Corporación RAND. Comparte la misión de mejorar la política y la toma de decisiones a través de la investigación y el análisis objetivo . Los clientes de RAND Europa incluyen a los gobiernos europeos, instituciones, organizaciones no gubernamentales y empresas con la necesidad de un análisis riguroso, independiente y multidisciplinar. Este informe ha sido revisado de acuerdo con las normas de garantía de calidad de RAND .

Las revistas “depredadoras” publicaron más de 420.000 artículos en 2014

 

 

Shen and Björk ‘Predatory’ open access: a longitudinal study of article volumes and market characteristics BMC Medicine (2015) 13:230

 

 

Una consecuencia negativa del rápido crecimiento de las publicación de acceso abierto financiadas a través de cargos de procesamiento de artículo, junto a la necesidad de los investigadores de publicar para obtener mejoras profesionales, acreditarse o obtener financiación para sus proyectos, es la aparición de editoriales y revistas “depredadoras” con un sistema de comercialización altamente cuestionable, lo que que ha provocado un aumento espectacular de artículos publicados por revistas “depredadoras”, según los investigadores Cenyu Shen y Bo-Christer Bjorkde Hanken School of Economics de Finlandia. A pesar de que el número total de revistas y editoriales con un volúmenes comparable al de todas las revistas indexadas por el Directorio de Revistas de Acceso Abierto (DOAJ), el problema de las revistas “depredadoras” parece circunscrito a unos pocos países, donde las prácticas de evaluación académica favorecen fuertemente la publicación internacional, pero sin controles adicionales de calidad.

 

Estás revistas que se cuentan por miles, cobran cientos de dólares a los autores a cambio una publicación rápida y de una mediocre o inexistente revisión por pares. Aunque hay una falta de estudios exhaustivos sobre varios aspectos de este fenómeno, incluyendo su extensión y distribución regional, una investigación de Cenyu Shen y Bo-Christer Bjork titulada  “‘Predatory’ Open Access: A Longitudinal Study of Article Volumes and Market Characteristics” publicada por BMC Medicine, demuestra que estás revistas publicaron más de 420.000 artículos de este tipo en 2014, frente a 53.000 que se publicaron en 2.010.

 

Evolución del Crecimiento de las revistas ”depredadoras”

 

 

Los autores utilizaron la lista de Jeffrey Beall sobre editores y revistas “depredadoras” como punto de partida para el estudio. Beall, bibliotecaria de comunicación académica y profesora asociada de la Universidad de Colorado en Denver, desarrollño 52 criterios para determinar la inclusión de las revistas en sus listas, con criterios que van desde si un editor solicita artículos originales a través de mensajes de spam a la existencia de un equipo editorial de la revista perfectamente organizado. De las aproximadamente 11.000 revistas incluidas en esta lista, Shen y Bjork hicieron su estudio basándose en una muestra de 613 revistas como una “estimación aproximada”.

El estudio contiene información sobre la disciplina y el asunto tratado, país de la editorial, cargo por procesamiento artículo y volúmenes de artículos publicados entre 2010 y 2014 que se recogieron manualmente desde los sitios web de las revistas. Además, para un subconjunto de revistas y artículos individuales también se tomaron muestras de la afiliación, país de los autores y las demoras de publicación.

Los resultados ponen de relieve que durante el período estudiado, las revistas depredadores han aumentado rápidamente su volumen de publicación de 53.000 artículos en 2010 a un número estimado de cerca de 420.000 artículos en 2014, publicados por alrededor de 8.000 revistas activas. Al principio de este fenómeno, los editores con más de 100 revistas dominaban el mercado, pero desde 2012 los editores en la categoría de tamaño de entre 10 y 99 revistas han acaparado la mayor cuota de mercado. La distribución regional de los países y la autoría del editor es altamente sesgada, respecto a los autores las tres cuartas partes proceden de Asia y África. los autores pagan una carga media de artículo de procesamiento de 178 USD parar los artículos publicados normalmente dentro de los 2 a 3 meses después de su presentación.

A pesar de que el número total de revistas y editoriales con un volúmenes comparable al de todas las revistas indexadas por el Directorio de Revistas de Acceso Abierto (DOAJ), el problema de las revistas “depredadoras” parece circunscrito a unos pocos países, donde las prácticas de evaluación académica favorecen fuertemente la publicación internacional, pero sin controles adicionales de calidad.

Desarrollo del primer modulo de revisión científica para repositorios (OPRM)

.

¿Por qué los artículos en arXiv o cualquier otro repositoro de acceso abierto no son acreditados formalmente como publicaciones? ¿Qué es exactamente lo que diferencia a los repositorios de acceso abierto de las editoriales? La respuesta es simple, que las publicaciones en revistas vienen con un indicador de calidad asociado con el prestigio de la revista, además porque sobre todo no van acompañados de ninguna garantía medible de calidad científica.

Con el apoyo de OpenAire Open Scholar coordinará un consorcio de cinco socios para desarrollar el primer módulo de revisión para repositorios de acceso abierto (OPRM). En el que participan el repositorio institucional del Consejo Superior de Investigaciones Científicas español (DIGITAL.CSIC) , el repositorio del Instituto Español de Oceanografía (e-IEO) ,  el Instituto de Investigación en Inteligencia Artificial de Cataluña (IIIA) , el Laboratorio Multidisciplinario de Biblioteconomía y Ciencias de la Computación en Granada (SECABA) , y una empresa de desarrollo y servicios profesionales con DSpace (ARVO)

OPRM pretende capitalizar la infraestructura existente ofrecida por los repositorios de acceso abierto y permitir su conversión en plataformas de evaluación totalmente funcionales con métricas de calidad asociadas. El proyecto prevé la conversión gradual de los repositorios de acceso abierto existente en plataformas de evaluación totalmente funcionales que proporcionen la capacidad necesaria para recuperar el control de calidad de la investigación en favor de la comunidad de investigadores y de este modo ayudar a minimizar la brecha entre las instituciones académicas y editoriales.

OPRM inicialmente se desarrolló como un plugin para repositorios utilizando el paquete de software Dspace, pero se diseñará de forma que facilite su posterior adaptación a otros paquetes de software de repositorios como EPrints y Invenio. La instalación del plugin OPRM en un repositorio de acceso abierto institucional u otro permitirá a la revisión formal de cualquier trabajo de investigación alojado en un repositorio por un número ilimitado de pares. Además, el sistema de reputación incluirá medidas de consenso para fortalecer aún más la validez de los resultados de agregación.

Este proceso de evaluación basado en repositorios se puede ejecutar en paralelo al tradicional de revisión por pares de cualquier revista y sus objetivos son:

  • Permitir a la revisión por pares de cualquier trabajo de investigación depositados en un repositorio, incluyendo datos, software y monografías.
  • Proporcionar nuevas métricas para la evaluación cuantitativa de la calidad de la investigación
  • Crear un sistema de reputación sofisticado para los colaboradores
  • Permitir que la ponderación de las revisiones en base a la calidad de las contribuciones anteriores de los usuarios
  • Facilitar la selección de contenido relevante de los repositorios digitales para distinguir que ha sido validado por los colaboradores mediante etiquetas y filtros de búsqueda avanzada
  • Involucrar a la comunidad de investigadores en un diálogo abierto y transparente sobre la solidez y utilidad del material de investigación