Archivo de la categoría: Investigación

La revisión por pares de los puestos académicos y las becas de investigación sigue estando condicionada por las métricas, especialmente cuando el revisor está muy bien clasificado en el ranking

Liv Langfeldt, Dag W. Aksnes, Ingvild Reymert. Peer review for academic jobs and grants continues to be shaped by metrics, especially if your reviewer is highly ranked. LSE, 16 nov. 2021

Texto completo

El objetivo de la revisión por pares de la investigación y de las juntas de contratación académica es proporcionar un juicio experto e independiente sobre la calidad de las propuestas de investigación y de los candidatos. Según los resultados de una encuesta reciente, Liv Langfeldt, Dag W. Aksnes e Ingvild Reymert, la métrica sigue desempeñando un papel importante en la toma de decisiones, sobre todo en el caso de los revisores que están muy bien clasificados.

Vivimos en una época en la que las métricas sobre las publicaciones científicas y las citas son abundantemente accesibles. Estas métricas ofrecen una visión general y una aportación a la política de investigación, y pueden utilizarse en la evaluación de la investigación por razones buenas -o al menos intrigantes-. En lugar de dedicar tiempo a la lectura de las publicaciones, el recuento de citas, el índice h, el factor de impacto de las revistas o indicadores similares se toman como un atajo para comprender la contribución de un trabajo o el rendimiento de un investigador. Además de ahorrar tiempo, las métricas pueden utilizarse porque se perciben como buenos indicadores de la calidad de la investigación y porque los revisores piensan que las comparaciones basadas en las métricas son más objetivas, justas y fiables que las evaluaciones que no se basan en ninguna métrica. En un estudio reciente se comprobó que las métricas se utilizan con frecuencia a la hora de evaluar las propuestas de subvención y los candidatos a puestos académicos. Además, los investigadores con un historial bibliométrico más sólido aplican con más frecuencia estas medidas en sus evaluaciones de investigación.

La mayoría utilizó métricas en sus revisiones

A pesar de su conveniencia, las métricas son controvertidas. La revisión por pares no está pensada para basarse en las métricas, sino en la experiencia de los pares y su comprensión de la investigación que se está revisando. Para entender mejor el papel de las métricas en las evaluaciones por pares, se utilizaron datos de encuestas para explorar las opiniones y prácticas de los investigadores en todos los campos y contextos académicos en tres países. Tanto para la revisión de las propuestas de subvención como para las evaluaciones de los candidatos a puestos académicos. Una gran mayoría de los revisores indicó que las métricas eran muy o algo importantes a la hora de identificar las mejores propuestas/candidatos. En ambos tipos de evaluaciones, se hizo hincapié en el «impacto de las citas de las publicaciones anteriores» y, sobre todo, en el «número de publicaciones/productividad».

Puntos de vista divergentes

Hubo algunas variaciones entre los tres campos incluidos en el estudio. Los economistas se basaron más en el número de publicaciones que los cardiólogos y los físicos. La variación entre los países (Países Bajos, Noruega y Suecia) fue mínima. Sin embargo, dentro de los tres campos y países hubo variaciones: Mientras que la mayoría consideraba que la métrica era importante, una proporción considerable no la consideraba importante. En otras palabras, hay opiniones divergentes entre los revisores sobre el uso de las métricas, lo que puede afectar a sus revisiones. Cuando actúan como revisores, los académicos tienen mucho poder discrecional y pueden optar por utilizar o no utilizar las métricas, haciendo caso omiso de las directrices (que pueden fomentar o desaconsejar las métricas). Por lo tanto, el resultado de los procesos de revisión puede variar en función de las preferencias individuales de los miembros del panel en cuanto a las métricas.

Los académicos más citados utilizan con más frecuencia la métrica de citas en sus evaluaciones

Resulta significativo que el énfasis en las métricas se corresponda con el propio rendimiento bibliométrico de los encuestados. Los evaluadores con puntuaciones bibliométricas más altas hacían más hincapié en las métricas cuando evaluaban a los candidatos a puestos académicos, y especialmente cuando evaluaban las propuestas de subvención. En el caso de estas últimas, la probabilidad de percibir el número de publicaciones y el impacto de las citas de los candidatos como «muy importantes» aumentó junto con el número de publicaciones de los encuestados, si tenían publicaciones de percentil superior y con la proporción de publicaciones de percentil superior.

¿Se ven afectadas las nociones de calidad de la investigación?

Incluso si las métricas afectan a la revisión por pares, nuestros datos indican que los revisores distinguen entre las características de una buena investigación y la bibliometría como indicadores del posible éxito futuro de un solicitante o una solicitud. Mientras que una gran mayoría señaló que las métricas eran importantes en sus revisiones, sólo una quinta parte indicó que su conclusión se basaba (en parte) en las puntuaciones de las citas o en el factor de impacto de las revistas al responder a la pregunta más general de qué percibían como la mejor investigación en su campo. Muy pocos encuestados indicaron las puntuaciones de las citas o el factor de impacto de las revistas como únicos indicadores de la mejor investigación. Por lo tanto, hay pocos indicios de que consideren los indicadores cuantitativos como un factor decisivo sobre lo que constituye la ciencia eminente.

Impacto en las agendas de investigación

Cuando se aplican a escala del individuo, los indicadores de número de publicaciones e impacto de las citas tienen limitaciones y deficiencias como medidas de rendimiento. No obstante, la encuesta indica un amplio uso de dichos indicadores a esta escala, tanto para la revisión de propuestas de subvención como para la contratación de puestos académicos. El énfasis en las métricas en las evaluaciones de los compañeros puede afectar a la actividad investigadora y a los programas de investigación. Los investigadores -especialmente los que inician su carrera- deben tener en cuenta qué tipo de investigación les ayudará a optar a subvenciones y puestos de trabajo. Si se hace hincapié en el historial cuantificable de los solicitantes en lugar de en el campo de especialización y el potencial de los solicitantes, o en la revisión en profundidad de la investigación propuesta, corremos el riesgo de basar las decisiones sobre la investigación futura en las tendencias pasadas, y los temas fácilmente publicables y muy citados pueden obtener desproporcionadamente más recursos. Además, damos a los jóvenes investigadores incentivos (más fuertes) para hacer el tipo de investigación que parece «segura» en términos de probabilidad de publicaciones y citas, con el fin de aumentar sus posibilidades de éxito en los concursos de subvenciones y puestos académicos.

Organización de evaluaciones justas

¿Qué significa esto para los investigadores que solicitan puestos de trabajo o becas de investigación? A la hora de planificar y utilizar la evaluación por pares, hay que tener en cuenta que los evaluadores -en particular los que obtienen altas puntuaciones- consideran que las métricas son un buen indicador del éxito futuro de los proyectos y los candidatos. Se basan en las métricas de publicación en sus evaluaciones a pesar de las preocupaciones sobre el uso y el mal uso de dichas métricas. En términos más generales, es necesario comprender mejor por qué y cómo se utilizan las métricas en los distintos campos de investigación, y el papel que desempeñan las métricas en el desarrollo de los campos, así como la forma en que el perfil de los paneles de revisión influye en el énfasis en las métricas. A esta escala, la publicación de directrices como el Manifiesto de Leiden para la medición de la investigación y la declaración DORA sobre el uso inadecuado del factor de impacto de las revistas, parecen no haber sido suficientes.

Ciencia peligrosa: política científica y análisis de riesgos para científicos e ingenieros

Rozell, Daniel J. Dangerous Science: Science Policy and Risk Analysis for Scientists and Engineers. Ubiquity Press, 2020.

Texto completo

El público suele estar entusiasmado con los últimos avances científicos y tecnológicos, pero a veces la investigación amenaza la seguridad física o las normas éticas de la sociedad. Cuando esto ocurre, los científicos e ingenieros pueden encontrarse desprevenidos en medio de un intenso debate sobre política científica. A falta de pruebas convincentes, los optimistas y los escépticos tecnológicos luchan por alcanzar un consenso. En estas situaciones, lo mejor es eludir la controversia instigadora utilizando una amplia evaluación de riesgos y beneficios como herramienta de exploración del riesgo para ayudar a los científicos e ingenieros a alcanzar sus objetivos evitando los peligros físicos o morales. Dangerous Science explora la intersección entre la política científica y el análisis de riesgos para determinar formas de minimizar los impactos negativos de la ciencia y la tecnología en la sociedad.

La libertad de la investigación científica: salvando las distancias entre la ciencia y la sociedad.

Giordano, Simona, y John Harris, editores. The Freedom of Scientific Research: Bridging the Gap between Science and Society. Manchester University Press, 2020.

Texto completo

Nunca el alcance y los límites de la libertad científica han sido más importantes ni han estado más atacados. La nueva ciencia, desde la inteligencia artificial hasta la manipulación genómica, crea oportunidades únicas para hacer del mundo un lugar mejor. Pero también presenta peligros sin precedentes, que muchos creen que amenazan la supervivencia de la humanidad y del planeta. Esta colección, realizada por un grupo internacional y multidisciplinar de pensadores de primera fila, aborda tres cuestiones vitales: (1) ¿Cómo influyen los avances científicos en la vida humana y en la estructura de las sociedades? (2) ¿Cómo se regula la ciencia y cómo debería regularse? (3) ¿Existen límites éticos para los avances científicos en algunos ámbitos sensibles (por ejemplo, la inteligencia robótica o la bioseguridad)? Los autores proceden de muchas disciplinas y abordan las cuestiones de forma diversa para garantizar la más amplia representación de los numerosos intereses en juego. Entre ellos se encuentran algunos de los académicos más destacados que trabajan en este campo, así como jóvenes académicos.

La representación de la ciencia y los científicos en los sellos

B. Yardley, Christopher. The Representation of Science and Scientists on Stamps. ANU Press, 2015.

Texto completo

The Representation of Science and Scientists on Postage Stamps (La representación de la ciencia y los científicos en los sellos) examina cómo las autoridades postales de todo el mundo han desarrollado técnicas únicas para representar la ciencia y los científicos con el fin de transmitir un mensaje detrás de la emisión de sellos. Se trata de un examen multidisciplinar que investiga la representación visual, la semiótica, la ciencia, la historia de la ciencia y la política, entre otras cuestiones. El autor introduce y describe una técnica para analizar cómo y por qué se han elegido las imágenes. ¿Es la imagen un espejo que refleja una realidad conocida o es una lente para desafiar, para impulsar el pensamiento o la acción? También plantea la hipótesis de que Internet creó un verdadero cambio en la comunicación científica, influyendo en la forma de utilizar las imágenes de la ciencia. El mensaje del sello pasó de perseguir un enfoque de comprensión del público a una conciencia de la ciencia con su creciente contenido contextual.

Cómo publicar en Ciencias Biológicas

Measey, J. (in press) How to publish in Biological Sciences: a guide for the uninitiated. CRC Press, Boca Raton. ISBN: 9781032116419

Texto completo

Este libro pretende ser una guía. No te sientes a leerlo de principio a fin. Si lo haces, creo que probablemente no ha entendido para qué sirve esta guía. En su lugar, quiero que pienses en este libro como una guía de la misma manera que podrías coger una guía de una ciudad extranjera, país o incluso como la legendaria guía electrónica de Douglas Adams La Guía del Autoestopista Galáctico Adams (2017) Sin embargo, en lugar de tener albergues o restaurantes recomendados por su nombre con una descripción de lo que los hace especialmente dignos de elogio, esta guía ofrece una idea genérica de para qué sirven esos lugares, cómo suelen ser, las mejores formas de llegar a ellos y los escollos que hay que evitar.

No se profundiza en ninguno de los temas. Esto es deliberado, ya que esta guía está aquí para proporcionarte un punto de partida para que explores si lo consideras necesario. Se proporciona una bibliografía (en la medida de lo posible), que se deberá utilizar de forma habitual para investigar el tema por sí mismo en caso de que necesite o se quiera saber más. Del mismo modo, ninguno de los consejos proporcionados en este libro debe anular lo que tu decidas por ti mismo o con tu asesor. Toma tus decisiones desde una posición informada.

Manual de edición científica

Manual de edición científica Mass.: Massachusetts Institute of Technology. Knight Science Journalism Program at MIT, 2020

Texto completo

En español

En portugués

Este libro, escrito por algunos de los redactores y reporteros científicos más reconocidos de la actualidad, permitirá formular las preguntas correctas, detectar los fallos en la información y conocer las mejores prácticas.

Este manual pretende extraer enseñanzas de quienes se especializan en la redacción y edición de textos científicos, para ofrecer sus ideas, conocimientos, consejos y recursos a todos los redactores. El objetivo es ayudar a garantizar que el periodismo científico cumpla con los más altos estándares de calidad, independientemente de la publicación o la audiencia.

El manual está diseñado para que los editores puedan hacer las preguntas correctas, para que puedan detectar los fallos en la información o la ciencia defectuosa, y para proporcionar información sobre las mejores prácticas para informar sobre la ciencia y los muchos temas, ahora más críticos que nunca, que toca, ya sea el medio ambiente o una pandemia.

El manual ofrece consejos prácticos a los redactores. Pero también pretende reconocer los retos y decisiones singulares a los que se enfrentan. Muchas de las lecciones se ilustran con ejemplos: tanto cuando el periodismo científico brilló como cuando se quedó corto.

Comunicar la ciencia: una perspectiva global.

Broks, Peter, et al., editores. Communicating Science: A Global Perspective. ANU Press, 2020

Texto completo

La comunicación científica moderna ha surgido en el siglo XX como un campo de estudio, un cuerpo de práctica y una profesión, y es una práctica con profundas raíces históricas. Hemos asistido al nacimiento de los centros científicos interactivos, a las primeras acciones universitarias en la enseñanza y la realización de investigaciones, y a un fuerte crecimiento del empleo de comunicadores científicos. Esta colección traza el surgimiento de la comunicación científica moderna en todo el mundo. Se trata del primer volumen que traza un mapa de las inversiones realizadas en todo el mundo en centros científicos, cursos universitarios e investigación, publicaciones y conferencias, además de contar las historias nacionales de la comunicación científica. ¿Cómo empezó todo? ¿Cómo ha variado el desarrollo de un país a otro? ¿Qué motivó a los gobiernos, las instituciones y las personas a considerar la comunicación de la ciencia como una respuesta a las preguntas sobre el lugar social de la ciencia? Communicating Science describe los caminos seguidos por 39 países diferentes. Están representados todos los continentes y muchas culturas. Para algunos países, es la primera vez que se cuenta su historia de comunicación científica.

Hacia una investigación compartida

Haller, Tobias, y Claudia Zingerli, editores. Towards Shared Research : Participatory and Integrative Approaches in Researching African Environments. transcript Verlag, 2020.

Texto completo

Las interfaces de investigación interculturales, interdisciplinarias y transdisciplinarias enfrentan a los investigadores a retos considerables. Hacia una investigación compartida retrata cómo estudiosos de diferentes orígenes disciplinarios y geográficos y en diversas etapas de la carrera académica se esfuerzan por lograr una comprensión más inclusiva y mejor del conocimiento sobre los entornos africanos. El libro se dirige a investigadores, facilitadores y responsables políticos para defender los enfoques participativos e integradores que dan lugar a análisis sistémicos y co-creados.

Comprender y comunicar el impacto de la investigación: Las necesidades de los profesores e investigadores postdoctorales de STEM y Ciencias de la Salud

Understanding and Communicating Research Impact: The Needs of STEM and Health Sciences Faculty and Postdoctoral Researchers. Association of Research Libraries, 2021

Texto completo

Como parte de la iniciativa Research Library Impact Framework de la ARL, las Bibliotecas de la Universidad de Washington (UW) exploraron las necesidades del profesorado y de los investigadores postdoctorales de la UW para comprender y comunicar el impacto de su trabajo, centrándose en los investigadores de los campos de la ciencia, la tecnología, la ingeniería y las matemáticas (STEM) y las ciencias de la salud. El proyecto se diseñó para comprender los retos a los que se enfrentan los investigadores en este ámbito, identificar cómo los participantes en estos campos definen y miden el impacto, y explorar sus prioridades para el apoyo a la investigación de impacto. El equipo del proyecto realizó una encuesta y entrevistas de seguimiento para investigar estas cuestiones. Este informe de investigación presenta la metodología del equipo del proyecto, los resultados y las recomendaciones para futuras investigaciones.

Guía del pequeño editor para el desarrollo de revistas de acceso abierto impulsadas por la tecnología digital

The Small Publisher’s Guide to Digitally Driven OA Journal Development How to publish discoverable, top-quality open access content at any scale. Scholastica, 2021

Texto completo

The Small Publisher’s Guide to Digitally Driven OA Journal Development, cubre las mejores prácticas de producción, alojamiento y difusión de contenidos para llevar su programa de publicación de revistas OA al siguiente nivel de forma sostenible.

Nunca ha habido un mejor momento para que las organizaciones académicas de cualquier tamaño publiquen revistas de acceso abierto (OA), con más modelos de OA posibles y opciones de alojamiento en línea que nunca. Pero eso no significa que no esté exento de desafíos. El panorama de la investigación está cambiando rápidamente, desde los cambios en la forma en que los lectores encuentran y se relacionan con el contenido hasta los nuevos requisitos de archivo e indexación. Es mucho lo que hay que hacer, especialmente para las editoriales más pequeñas.