Archivo de la etiqueta: Impacto

Metrics Toolkit: conjunto de herramientas de métricas

Metrics Toolkit

https://www.metrics-toolkit.org/

El kit de herramientas de métricas proporciona información basada en la evidencia sobre las métricas de investigación en todas las disciplinas, incluyendo cómo se calcula cada métrica, dónde se puede encontrar y cómo debe (y no debe) aplicarse cada una. También encontrarás ejemplos de cómo utilizar las métricas en las solicitudes de subvención, el CV y las convocatorias de promoción.

Metrics

Terminología de las métricas

Metrics terminology
Patty Smith, Altmetric14th February 2022

Texto completo

Existen muchas métricas diferentes que intentan medir el alcance y la influencia del trabajo académico. Se dividen principalmente en tres categorías:

Métricas a nivel de artículo: indicadores que pretenden medir el alcance o la influencia de un producto de investigación individual, como un artículo de revista o un conjunto de datos. Ejemplo: número de citas.

Métricas a nivel de revista: indicadores que pretenden medir el alcance o la influencia de una revista. Ejemplo: Factor de impacto de la revista.

Métricas a nivel de autor: indicadores que pretenden medir el alcance o la influencia de un autor individual. Ejemplo: índice h.

Las métricas a nivel de revista y de autor son bastante sencillas, pero las métricas a nivel de artículo, también conocidas como métricas a nivel de producción (porque se puede seguir cualquier producción académica con un identificador único), tienden a causar un poco de confusión.

La confusión suele deberse a un malentendido del término altmetrics. Altmetrics significa métricas alternativas, no métricas a nivel de artículo. Ambos términos no son sinónimos. Las altmétricas son indicadores de la atención y el compromiso no tradicionales con los productos académicos, como la atención en las redes sociales o en los medios de comunicación.

La puntuación de atención de Altmetric es un ejemplo de métrica a nivel de artículo. Otros ejemplos son: el recuento de citas, el índice de citas relativo (RCR), el impacto de citas normalizado por categorías (CNCI) y el impacto de citas ponderado por campos (FWCI).

Luego están las métricas de uso. Las métricas de uso incluyen las visitas a la página, las descargas y las acciones. Algunas personas categorizan las métricas de uso como un tipo de métrica a nivel de artículo, mientras que otras consideran las métricas de uso como una categoría completamente diferente. En Altmetric.com, no se hace un seguimiento de las métricas de uso.

Es importante recordar que hay que utilizar estas métricas de forma responsable y para el uso al que están destinadas. Por ejemplo, no debería utilizar una métrica a nivel de revista para evaluar el rendimiento de un individuo.

Para obtener más información sobre el uso responsable de las métricas, considera la posibilidad de leer el Manifiesto de Leiden sobre las métricas de investigación. Visita Metrics Toolkit para obtener más información sobre los diferentes tipos de métricas y sus limitaciones, las fuentes de datos, los casos de uso adecuados, etc.

El mayor uso de estrategias de traducción de conocimientos se asocia con un mayor impacto de la investigación

Wolfenden, Luke, et al. «Increased use of knowledge translation strategies is associated with greater research impact on public health policy and practice: an analysis of trials of nutrition, physical activity, sexual health, tobacco, alcohol and substance use interventions». Health Research Policy and Systems, vol. 20, n.o 1, enero de 2022, p. 15. BioMed Central, https://doi.org/10.1186/s12961-022-00817-2.

Se define la traducción del conocimiento como «la síntesis, la difusión, el intercambio y la aplicación ética del conocimiento para mejorar la salud, la prestación de servicios sanitarios y el sistema de salud». Esta definición se deriva de la definición de KT de los Institutos Canadienses de Investigación Sanitaria (CIHR)

El mayor uso de estrategias de traducción de conocimientos se asocia con un mayor impacto de la investigación en la política y la práctica de la salud pública: un análisis de los ensayos de intervenciones en nutrición, actividad física, salud sexual, tabaco, alcohol y uso de sustancias

Se recomienda un mayor uso de las estrategias de traducción de conocimientos (KT) para mejorar el impacto de la investigación de los ensayos de salud pública. El propósito de este estudio fue describir (1) el impacto de la investigación de los ensayos de intervención de salud pública basados en el entorno en la política y la práctica de salud pública; (2) la asociación entre las características de los ensayos y su impacto de la investigación en la política y la práctica de salud pública; y (3) la asociación entre el uso de estrategias de KT y los impactos de la investigación en la política y la práctica de salud pública.

De los ensayos incluidos, los autores informaron que el 65% tuvo uno o más impactos de investigación. La repercusión de la investigación notificada con mayor frecuencia fue la citación en un documento o anuncio político (46%). No hubo asociaciones significativas entre la efectividad de la intervención, el riesgo de sesgo del ensayo, el entorno o el riesgo para la salud y el impacto del ensayo. Sin embargo, por cada aumento de una unidad en la puntuación total de uso de las estrategias de traducción de conocimientos (KT) (rango 0-8), que refleja una mayor actividad total de KT, las probabilidades de un impacto de investigación en la política o la práctica sanitaria aumentaron aproximadamente un 30% (OR = 1,30; IC del 95%: 1,02, 1,66; p = 0,031). El examen post hoc de las puntuaciones de dominio de KT sugiere que las acciones de KT centradas en proporcionar apoyo a medida para facilitar la implementación del programa y un mayor uso de los productos y herramientas de investigación para difundir los hallazgos a los usuarios finales pueden ser las más influyentes para lograr el impacto.

Impacto de la investigación: una guía para crear, captar y evaluar el impacto de su investigación

Research impact: a guide to creating, capturing, and evaluating the impact of your research. Taylor & Francis,  Author Services, 2022

Texto completo

Todo investigador quiere que su trabajo tenga repercusión, ya sea en el mundo académico, en la sociedad o en ambos. Pero crear un impacto real con su trabajo puede ser una una tarea ardua y que requiere mucho tiempo, que puede parecer difícil de encajar en una carrera académica ya de por sí exigente.

Esta guía está diseñada para ayudar a entender qué significa el impacto y su trabajo, por qué es importante cómo conseguirlo y cómo medirlo. También se ha incluido inspiración e ideas para ayudarte a empezar.

La nueva herramienta de perfiles de autor de Clarivate Analytics incluye la actividad de revisión por pares

Clarivate Analytics’s new author profiles tool to include peer review activity. Nature Index, 2022

Texto original

Clarivate Analytics, la empresa británica propietaria de la base de datos académica Web of Science (WoS), ha comenzado a generar automáticamente perfiles de autores, incluyendo información sobre la actividad de revisión por pares de los investigadores cuyos trabajos están indexados en la base de datos.

La información sobre la revisión por pares se integrará a partir de principios de 2022. Provendrá principalmente de Publons, un sitio web de uso gratuito que permite a los investigadores reclamar el crédito de la revisión por pares, que fue adquirido por Clarivate en 2017 y ahora tiene más de tres millones de usuarios.

La adición de la nueva función Publons convierte a la herramienta WoS en la primera que reúne detalles sobre los registros de publicación de los investigadores, sus colaboradores, los consejos de redacción de las revistas a las que pertenecen y otras actividades profesionales de investigación, como los manuscritos que han arbitrado para las revistas y las revisiones de subvenciones que han realizado. La herramienta también puede ser útil para los investigadores que realizan estudios de minería de textos.

Para encontrar artículos anteriormente, los usuarios de WoS realizaban una búsqueda de documentos en la base de datos de WoS, aunque desde 2019 también es posible una búsqueda de autores para encontrar autores individuales y sus actividades académicas. La herramienta es actualmente de uso gratuito, pero la empresa ofrecerá una versión con características adicionales de pago.

Los investigadores que utilicen la herramienta también podrán vincular sus perfiles a su identificador digital único, ORCID ID. De este modo, cuando un investigador añada un artículo a su perfil ORCID, se añadirá automáticamente a su perfil de autor de WoS, y viceversa

Según sus creadores, la herramienta de WoS está especialmente destinada a la evaluación de las solicitudes de financiación de los investigadores, así como a la evaluación de los académicos para su contratación y promoción. Ayudará a los evaluadores a detectar cualquier conflicto de intereses y les dará una visión más completa de las actividades académicas de un académico, señalan.

Dar visibilidad a la revisión por pares es un paso importante para solucionar su falta de reconocimiento como componente del rendimiento de la investigación, afirma Waltman. Reconoce que los informes de los árbitros son «importantes productos académicos que deben ser tratados de forma similar a otros tipos de publicaciones».

Los indicadores bibliométricos : fundamentos y aplicación al análisis de la ciencia

Maltrás, Bruno. Los indicadores bibliométricos : fundamentos y aplicación al análisis de la ciencia / B. Maltrás Barba. Gijón: Trea, 2003.

Texto completo

El tamaño, la complejidad y el impacto alcanzados por la actividad científica en el siglo XX han consolidado la necesidad de estudiar la ciencia cuantitativamente; tal enfoque aspira a proporcionar descripciones objetivas y operativas acerca de un fenómeno cultural sin precedentes en la historia humana. Su reducción a un conjunto de números, por tanto, tropieza con evidentes problemas de validación: establecer los requisitos para definir medidas, garantizar su significatividad, especificar su interpretación, delimitar el ámbito de su aplicación… El presente libro trata esas cuestiones en relación con una clase particular de medidas cuantitativas sobre la ciencia, los indicadores bibliométricos, que proceden del análisis estadístico de la literatura científica. Se muestra cómo esos indicadores pueden vincularse a aspectos esenciales del proceso científico y hasta qué punto es posible construir medidas que describan adecuadamente el desarrollo, el estado y la estructura de las áreas científicas.

 Investigar y escribir: publicar sin perecer

Sequeiros, Paula and Carvalho, Maria José Paiva Fernandes and Capinha, Graça and Miguéis, Ana Eva.. et al.  A Investigação e a escrita: Publicar sem Perecer., Investigação . Imprensa da Universidade de Coimbra, IUC, 2021

Texto completo

Investigar y escribir: Publicar sin perecer es una colección publicada en portugués, a partir de una experiencia de cinco años de formación avanzada extracurricular (Publicar sin perecer: Sobrevivir a la confusión), en materia de alfabetización informacional, escritura y publicación científica. Se trata de una reflexión y un cuestionamiento sobre cuál debe ser el papel de la ciencia en un contexto que, cada vez más, parece querer reproducir en la academia el mercantilismo de corte neoliberal. Aquí se lee la colaboración de autores nacionales e internacionales que consideran una diversidad de campos teóricos y empíricos sobre el fenómeno. Este trabajo pretende ser una contribución para identificar y cuestionar los problemas resultantes, tratando de apuntar algunas soluciones al creciente malestar en el mundo académico.

Clarivate propone un nuevo método para analizar el crédito que reciben los autores de los artículos académicos a través de las citas

Jonathan Adams, David Pendlebury and Ross Potter. Global Research Report Making it count: Research credit management in a collaborative world. Institute for Scientific Information (ISI)™, 20222

Texto completo

Clarivate ha publicado un nuevo informe del Institute for Scientific Information™ de la compañía que propone un nuevo método para analizar el crédito que reciben los autores de trabajos académicos a través de las citas.

Este informe propone un nuevo método para analizar el crédito de los trabajos académicos y sus citas. Es complementario complementario, y no contradictorio, del el análisis de las citas fraccionadas.

En todo el panorama de la investigación, la recepción de crédito a través de la citación de fuentes influye en la motivación y la reputación. El crédito por la publicación de investigaciones académicas suele afectar al empleo, la promoción y la financiación a nivel individual, así como a la financiación y la toma de decisiones de las instituciones de investigación académica y los países.

En un mundo cada vez más global y colaborativo, en el que aumenta rápidamente el número de artículos que nombran a docenas o incluso cientos de investigadores como autores, es esencial la necesidad de un análisis informado y basado en datos sobre el crédito que funcione en todas las disciplinas y regiones de la investigación. Sin embargo, los métodos existentes para analizar los créditos pueden verse distorsionados por recuentos de autores excepcionalmente elevados.

Hacer que cuente: La gestión de los créditos de investigación en un mundo colaborativo propone un nuevo indicador, el «Collab-CNCI» (Collab-CNCI) como una posible solución.

El informe no sólo confirma que los trabajos altamente colaborativos pueden distorsionar los resultados resumidos a nivel nacional e institucional, sino que también muestra cómo sucede. Destaca los aspectos clave de los logros y muestra dónde las instituciones generan un crédito académico significativo a partir de las citas de sus trabajos más nacionales.

Collab-CNCI complementa el ya existente indicador de impacto de citas normalizado por categorías creado por el CWTS de la Universidad de Leiden. Pero el recuento de citas acumulado para cada artículo se normaliza con respecto a otros artículos del mismo año de publicación, la misma categoría temática, el mismo tipo de documento y, fundamentalmente, el mismo tipo de colaboración.

Ludo Waltman, catedrático de Estudios Científicos Cuantitativos del Centro de Estudios Científicos y Tecnológicos (CWTS) de la Universidad de Leiden, ha declarado lo siguiente «El creciente nivel de colaboración en la ciencia mundial plantea cuestiones difíciles en relación con el diseño y la interpretación de los indicadores bibliométricos. Es absolutamente esencial desarrollar una mejor comprensión de la compleja interacción entre la colaboración científica y el impacto de las citas. Celebro la contribución del Instituto de Información Científica, que forma parte de Clarivate, para abordar esta difícil cuestión».

El Instituto de Información Científica invita a los usuarios y gestores de la investigación a comentar las ventajas relativas del Collab-CNCI en comparación y como complemento de otros métodos para permitir decisiones equilibradas y oportunas a nivel individual, institucional y nacional. Por favor, envíe sus comentarios a ISI@clarivate.com.

Los beneficios del acceso abierto para los libros académicos: más descargas y más citas

Neylon, Cameron, Alkim Ozaygen, Lucy Montgomery, Chun-Kai (Karl) Huang, Ros Pyne, Mithu Lucraft, and Christina Emery. 2021. “More Readers in More Places: The Benefits of Open Access for Scholarly Books”. Insights 34 (1): 27. DOI: http://doi.org/10.1629/uksg.558

El acceso abierto a contenidos académicos ha crecido sustancialmente en los últimos años. Esto incluye el número de libros publicados en acceso abierto en línea. Sin embargo, hay pocos estudios sobre cómo los patrones de uso (a través de descargas, citas y visibilidad en la web) de estos libros pueden diferir de sus homólogos cerrados. Esta información no sólo es importante para los editores de libros, sino también para los investigadores de disciplinas en las que los libros son la norma.

Este artículo informa sobre los resultados de la comparación de muestras de libros publicados por Springer Nature para arrojar luz sobre las diferencias en los patrones de uso entre los libros de acceso abierto y los cerrados. El estudio incluye una selección de 281 libros de acceso abierto y una muestra de 3.653 libros cerrados (extraída de 21.059 libros cerrados mediante un muestreo aleatorio estratificado). Los libros están estratificados por combinaciones de tipo de libro, disciplina y año de publicación para permitir igualmente comparaciones dentro de cada estrato y maximizar la potencia estadística de la muestra. Los resultados muestran una mayor diversidad geográfica de uso, un mayor número de descargas y más citas para los libros de acceso abierto en todos los estratos. Es importante destacar que los libros de acceso abierto han aumentado el acceso y el uso por parte de poblaciones tradicionalmente desatendidas.

Sexenios de investigación CNEAI 2021: ¿Dónde encontrar evidencias de impacto de la investigación

Sexenios de investigación CNEAI 2021: ¿Dónde encontrar evidencias de impacto de la investigación

VIDEO

PRESENTACION PPS

Un sexenio es un tramo de investigación reconocido al profesorado universitario por los méritos de su actividad investigadora, labor realizada a través de un programa de la ANECA, que se convoca y puede solicitar cada mes de diciembre de cada año. Se denomina así porque los solicitantes han de someter a evaluación una selección de los trabajos científicos publicados durante un período de seis años. La finalidad es el fomento, mediante la asignación de un complemento económico, del trabajo investigador de los docentes de las universidades españolas. Se orienta sobre como encontrar evidencias de impacto y productividad investigadora para la presentación de sexenios de investigación.