Archivo de la etiqueta: Métricas

A medida que los investigadores publican en revistas menos prestigiosas, surgen nuevas medidas de calidad

36189958_s

As Scholars Are Driven to Less Prestigious Journals, New Measures of Quality Emerge. By Lindsay Ellis en The Chronicle of Higher Education February 18, 2019

Ver original

 

A medida que más estudiosos publican en revistas de acceso abierto menos reconocidas, se buscan otras formas de medir el impacto de sus investigaciones. Una medida potencial de alcance es la medición de los datos de las interaciones en línea: publicaciones en Twitter, enlaces a blogs y otras métricas de varios tipos (Altmetrics).

HuMetricsHSS, un proyecto de humanidades y ciencias sociales que hace un seguimiento de los indicadores en esos campos, incluye como otra de esas métricas la “apertura”, que incluye la “transparencia, la franqueza y la rendición de cuentas” de un investigador, además de la práctica de hacer que la investigación de un investigador tenga acceso abierto en todas las etapas.

Estos esfuerzos buscan cambiar las normas establecidas desde hace mucho tiempo. Los investigadores en sus primeras etapas de la carrera académica, alentados por los incentivos de permanencia y promoción, sienten la presión de publicar en revistas académicas de prestigio. Los miembros de las agencias de investigación encargados de evaluar el impacto de la investigación de un solicitante pueden no ser capaces de evaluar su contenido si no tienen la especialidad adecuada, por lo que el nombre de una revista de suscripción bien conocida puede servir como un indicador de calidad. Philip N. Cohen, profesor de sociología en la Universidad de Maryland en College Park. dice que las estructuras y los requisitos desarrollados por la agencias y universidades están obligando a investigadores y a los departamentos a “adaptarse a esta norma y a comprenderla”.

Cohen, ha estado siguiendo este impulso. Pero incluso ese enfoque más holístico todavía tiene deficiencias, dice. “Se está buscando una medida que funcione en todas las disciplinas o en diferentes contextos. Todo el mundo está buscando una forma alternativa”.

Hasta ahora, pocas instituciones han tomado esa táctica. Sólo el 5 por ciento de las instituciones mencionaron el término “acceso abierto” en los documentos de acreditación, promoción y tenencia, según una investigación realizada en 2018 por académicos de la Universidad Simon Fraser, la Universidad Estatal de Arizona, la Universidad de Vermont y la Universidad Nacional Autónoma de México.

 

 

Mesa Altmetrics de la la II Reunión de Servicios de Evaluacion Cientíca de Universidades, Córdoba 2019

Jaltmetrics_q320

II Reunión de los Servicios de Evaluación en las Universidades celebrada en la Universidad de Córdoba el 31 de Enero – 1 de Febrero de 2019.

Mesa Altmetrics

 

Daniel Torres-Salina “La evaluación del libro científico desde la perspectiva de las nuevas métricas” Experiencias y retos de las unidades de evaluación científica.
https://zenodo.org/record/2554945#.XFQieE_Dvtk.twitter

Nicolás Robinson. ‘Altmétricas aplicadas a nivel institucional’
https://t.co/LkorzB7fnh?amp=1

Julio Alonso Arévalo. “Altmetrics: medición del impacto social de la investigación y de la reputación digital del investigador
https://www.dropbox.com/s/ff13oohy7zs68ol/CORDOBA.%20ALtmetrics%20%202.pptx?dl=0

E2437E8A-A9AE-4EFF-B3BF-F09EDAD976D3

¿Pueden las revisiones de Amazon.com ayudar a evaluar el impacto de los libros?

amazonscreen

Mike Thelwall, Kayvan Kousha. “Can Amazon.com Reviews Help to Assess the Wider Impacts of Books”. Journal of the Association for Information Science and Technology 67(3) · August 2014

Texto completo

Aunque los recuentos de citas se utilizan a menudo para evaluar el impacto en la investigación de las publicaciones académicas, son problemáticos para los libros que buscan un impacto educativo o cultural. Para llenar este vacío, este artículo evalúa si una serie de métricas simples derivadas de las revisiones de Amazon.com de libros académicos podrían dar evidencia de sus impactos. Basado en un conjunto de 2.739 monografías académicas de 2008 y un conjunto de 1.305 libros más vendidos en 15 categorías de materias académicas de Amazon.com, la existencia de correlaciones significativas pero bajas o moderadas entre las citas y el número de reseñas, combinadas con otras evidencias, sugiere que las reseñas de libros en línea tienden a reflejar la mayor popularidad de un libro en lugar de su impacto académico, aunque existen diferencias disciplinarias sustanciales. Por lo tanto, se recomiendan las métricas basadas en revisiones en línea para la evaluación de libros que apuntan a un público amplio dentro o fuera de la academia, cuando es importante captar los impactos más amplios de las actividades educativas o culturales y cuando no pueden ser manipulados antes de la evaluación.

KUDOS. Acelerar el impacto de la investigación

kudos

Kudos

https://www.growkudos.com

 

Kudos fue desarrollado para ayudar a los investigadores para asegurar que sus publicaciones fueran encontradas, leídas y citadas en un mundo de sobrecarga de información.

Fundado en 2013 por tres profesionales de la edición y la tecnología, Kudos ha ido creciendo y ganando importantes premios a la innovación en la industria. Hoy en día, Kudos es utilizado por investigadores de todo el mundo para aumentar el número de lectores y la atención a su trabajo en todo el mundo. Kudos trabaja con editores, universidades, corporaciones, financiadores, proveedores de métricas y otros intermediarios para ayudar a agregar esfuerzos en torno a los investigadores para generar impacto en su trabajo. Al hacerlo, ayuda a fortalecer las asociaciones entre los investigadores y sus organizaciones afiliadas y otros proveedores de servicios.

El objetivo de Kudos es ayudar a que más gente encuentre y entienda tu trabajo de investigación. Además permite obtener acceso instantáneo a herramientas y orientaciones sencillas que nos ayudarán a maximizar el número de lectores y las citas de nuestra investigación. Además proporciona “métricas” que incluye citas, descargas y Altmetrics. Según sus promotores las descargas a texto completo de nuestras investigaciones se incrementarán en un 23%.

44397282690_2840a289b4_b_d

Para generar el perfil en KUDOS sólo necesitamos dar nuestros datos, afiliación y el sistema nos conecta con nuestras publicaciones a través de ORCID. También podemos encontrar nuestras publicaciones por nombre, titulo o número DOI para añadirlas automáticamente.

Kudos es la única plataforma dedicada a la difusión a través de las múltiples redes y canales disponibles para que los investigadores compartan información sobre su trabajo. También es la única plataforma que agrega todas las métricas más relevantes sobre ese trabajo en un solo lugar, y mapea las actividades de extensión contra esas métricas.

 

DataOne: El repositorio de datos de investigación de Ciencias de la naturaleza implementa métricas de uso y citas

d1-logo-v8_aligned_left

https://www.dataone.org/

 

DataONE es un proyecto impulsado por la comunidad que proporciona acceso a los datos a través de múltiples repositorios de los miembros asociados, lo que permite mejorar la búsqueda y el descubrimiento de datos de las Cuencias naturales  y del medio ambiente. DataONE promueve las mejores prácticas en la gestión de datos a través de recursos y materiales educativos receptivos.

DataONE comprende una red distribuida de centros de datos, redes científicas u organizaciones. Estas organizaciones pueden exponer sus datos dentro de la red DataOne. Además de los datos científicos, los miembros pueden proporcionar recursos informáticos, o servicios como la replicación de datos, a la comunidad DataONE.

El uso de datos y las métricas de citación disponible en la  plataforma de búsqueda y descubrimiento de datos, https://search.dataone.org, incluyen recuentos de citaciones, descargas y vistas para cada conjunto de datos en nuestra red de repositorios de Ciencias de la Tierra y del medio ambiente. Estas métricas son interactivas y se pueden explorar más a fondo para identificar los artículos que citan los datos o, en el caso de las descargas y las visitas, para profundizar en los detalles de cuándo se accedió a los datos. La implementación de estas métricas de uso y citación de datos es el resultado de la colaboración como parte del proyecto Make Data Count y complementa las métricas recientemente implementadas en Dash. Las métricas también cumplen con el Código de Práctica para Datos de Investigación de COUNTER (COUNTER Code of Practice for Research Data).

 

Plan de trabajo de la Asociación de Universidades Europeas (EUA) sobre la evaluación de la investigación en la transición hacia la ciencia abierta

41336384590_2cb5c73d75_o_d

EUA Roadmap on Research Assessment in the Transition to Open Science EUA, 2018

Texto completo

 

Los nuevos enfoques de la evaluación de la investigación reflejan la urgente necesidad de cambiar el paradigma actual más allá del típico factor de impacto de la revista. Este La hoja de ruta aborda una selección de temas relacionados con los nuevos enfoques en la evaluación de la investigación, incluida la evaluación de los resultados de la investigación, los investigadores y las unidades de investigación, y las instituciones.

La Asociación Europea de Universidades (EUA) ha apoyado de forma continuada a las universidades europeas. las universidades en la transición hacia la Ciencia Abierta y, en particular, hacia el Acceso Abierto. Al de su Grupo de Expertos en Ciencia 2.0/Ciencia Abierta, la EUA ha desarrollado una una serie de iniciativas en este ámbito, tal como se esboza en la hoja de ruta de la AEU sobre el acceso abierto a la investigación Publicaciones. Esta hoja de ruta se centraba principalmente en la introducción del acceso abierto como modelo principal de acceder a las publicaciones de investigación. Mirando hacia el futuro, hacia una transición más global hacia Ciencia Abierta, con su marco más amplio más allá del acceso a las publicaciones de investigación, la El Grupo de Expertos está empezando a abordar nuevos modelos de valoración y evaluación de la investigación en todos los niveles, ya que son fundamentales para lograr un sistema más justo, abierto y transparente impulsado por investigadores.

La ciencia abierta que abarca la investigación abierta en todas las áreas disciplinarias) todavía no es una práctica establecida y su integración en las comunidades científicas sigue siendo un reto, ya que adopta diversas formas. El acceso abierto a las publicaciones de investigación representa sólo una de las etapas necesarias de la Ciencia Abierta, y la Ciencia Abierta en su conjunto está todavía lejos de su pleno potencial, lo que requiere una transformación sustancial basada en los principios de compartir y colaborar. Los nuevos modelos cuantitativos y cualitativos futuros de valoración y evaluación de la investigación deben reflejar y promover una actitud tan novedosa.

El tema de la evaluación de la investigación, es decir, la búsqueda de mejores formas de evaluación, se está volviendo cada vez más importante para la comunidad científica en general y para una variedad de de los responsables políticos nacionales y europeos. Este desarrollo está inexorablemente ligado a la transición hacia la Ciencia Abierta.

Los nuevos enfoques de la evaluación de la investigación reflejan la urgente necesidad de cambiar el paradigma actual más allá del típico factor de impacto de la revista. Este La hoja de ruta aborda una selección de temas relacionados con los nuevos enfoques en la evaluación de la investigación, incluida la evaluación de los resultados de la investigación, los investigadores y las unidades de investigación, y las instituciones (laboratorios, centros de investigación y universidades). Con este documento, EUA tiene por objeto sensibilizar y apoyar a las instituciones en el desarrollo de la evaluación de la investigación enfoques que se centran en la calidad de la investigación, el impacto potencial y futuro, y que tienen en cuenta de Open Science.

En su plan de trabajo, la EUA identifica los siguientes objetivos para su futura labor en este ámbito:

  • Fomentar el desarrollo de enfoques de evaluación de la investigación flexibles, transparentes, justos y sólidos, recompensando las contribuciones de la Ciencia Abierta y teniendo en cuenta las diferencias entre las disciplinas académicas, la investigación multidisciplinaria y la investigación fundamental y aplicada;
  • Promover enfoques flexibles, transparentes y responsables en la evaluación de las carreras de los investigadores, teniendo en cuenta las diferentes etapas de sus carreras;
  • Apoyar a las universidades europeas y a las conferencias nacionales de rectores en el desarrollo y la aplicación de nuevos enfoques para la evaluación de la investigación.

 

Para ello, la EUA centrará sus esfuerzos en la recopilación y el intercambio de información, entablando un estrecho diálogo con las universidades y otras partes interesadas pertinentes y proponiendo recomendaciones sobre políticas y buenas prácticas.

Recomendaciones sobre métricas de académicas para bibliotecas de investigación

 

screen-shot-2018-06-20-at-09-31-13

Scholarly Metrics Recommendations for Research Libraries: Deciphering the Trees in the Forest. [e-Book] The Hague, LIBER, 2018.

Texto completo

La Ciencia Abierta requiere algunas transformaciones valientes en este campo. Esto incluye un énfasis en métricas de próxima generación basadas en la transparencia, la apertura y la colaboración: tanto para las áreas científicas tradicionales como para las emergentes.

El uso de métricas académicas es uno de los más desafiantes en el campo de la investigación actual. La proliferación de nuevos modelos de comunicación académica, los cambios en el campo de la evaluación de la investigación y el uso extensivo de las aplicaciones de los medios sociales han sacudido los cimientos de los paradigmas métricos tradicionales.

Para fomentar esta visión de un panorama de investigación transformado en 2022, el Grupo de Trabajo de Métricas Innovadoras de LIBER ha publicado un nuevo informe: Scholarly Metrics Recommendations for Research Libraries: Deciphering the Trees in the Forest.

En el informe se formulan recomendaciones sobre la manera en que las bibliotecas de investigación y las infraestructuras de información pueden abordar las métricas académicas, y sobre cómo empezar a desarrollar servicios que las apoyen. Las recomendaciones se agrupan en cuatro tipos importantes de actividades relacionadas con las métricas:

  • Descubrimiento y Descubribilidad
  • Mostrar los Logros
  • Desarrollo de Servicios
  • Evaluación de la investigación

LIBER reconoce que no todas las bibliotecas parten del mismo punto. El contexto de la investigación en los países europeos es bastante diverso, con bibliotecas que operan en muchos niveles diferentes de experiencia y con diferentes niveles de recursos a su disposición. Por lo tanto, las recomendaciones del informe se organizan en tres niveles de compromiso: Inicial, Intermedio y Avanzado. Las bibliotecas pueden elegir qué recomendaciones adoptar, basándose en su nivel actual de compromiso con las métricas académicas. El orden en que aparecen las recomendaciones se correlaciona con la importancia potencial que pueden tener para una institución