Archivo de la etiqueta: Evaluación

Elsevier expande sus perspectivas métricas con el lanzamiento de proyecto piloto altmetrics

 

Elsevier que ha sido durante mucho tiempo un defensor a ultranza de la informetría robusta, parece ser que está particularmente interesada en la comprensión de cómo se pueden utilizar estas nuevas medidas en relación con los datos de uso y citación de sus artículos de revista, para proporcionar nuevos indicadores significativos para la comunidad investigadora.

Altmetrics, (la medida de la actividad académica en las redes sociales y en las herramientas sociales), es una palabra de moda importante en este momento, y aunque es una disciplina muy nueva, su interés está creciendo rápidamente, como lo demuestran los volúmenes de búsqueda relativas en el siguiente gráfico.

Con Internet y los avances en el análisis de ‘big data’ cada vez más interconectados, en la actualidad hay muchas maneras para medir el impacto de la investigación. Las estadísticas de Mendeley, por ejemplo, parece proporcionar más conocimientos sobre el uso académico de un documento que Twitter.

 

Los datos bibliométricos tradicionales pueden ser complementados con datos de uso (visitas y descargas), mientras que el éxito de las comunidades y las herramientas en línea han dado lugar a una visibilidad más amplia para un comentario erudito, las estadísticas de lectores, y otras medidas de atención en línea. Altmetrics abarcan la actividad social en la forma de menciones en las redes sociales, la actividad académica en las bibliotecas digitales, índices de popularidad en los gestores de referencias, comentarios erudito a través de blogs científicos y referencias en los medios sociales.

Altmetrics ofrecen una visión alternativa sobre el uso e impacto de la investigación por parte de los lectores de artículos académicos, y esta información ha impulsado a autores, investigadores, editores a tratar de entender cual es la importancia de estos datos. Por ello, Elsevier ha empezado a participar en la proyecto NISO Altmetrcs y esta linea sigue en su proyecto Article Usage Reports, un programa que informa a los autores que han publicado en las revistas de Science Direct y Elsevier.com sobre cómo se está visualizando su artículo.

 

 

Los datos proporcionados por Mendeley -que Elsevier adquirió el año pasado-, siguen proporcionando una fuente de datos invaluable y libre sobre situación de los investigadores en su disciplina. Ya que Mendeley recoge datos de más de 2 millones de investigadores a través de más de 100 millones de referencias compartidas que tienen el gestor de referencias.

También Elsevier ha establecido relaciones  con alguna start-ups relacionada con altmetrics como Altmetric.com explorer un  producto para comprender y analizar las tendencias, así como informar a algunas de las campañas de marketing. Y se ha unido a un piloto  a través de Kudos para investigar cómo los autores de Elsevier pueden publicitar sus investigaciones. Incluso ha empezado a participar en un proyecto piloto en altmetric.com

SciELO Citation Index : la integración de las revistas de Scielo en WoK

SciELO (Scientific Electronic Library Online) es un programa de la Fundación de Investigación de Sao Paulo para la publicación cooperativa de revistas de acceso abierto en Internet. Es apoyado por el Consejo Nacional de Desarrollo Científico y Tecnológico y es producto de una colaboración con el Centro Latinoamericano y del Caribe de Información en Ciencias de la Salud. Los contenidos de SciELO incluye revistas regionales de América Latina y el Caribe, así como algunos títulos de revistas de España, Portugal y Sudáfrica.

SciELO Citation Index posibilitará conectar SCielo con la plataforma de medición de investigación con más más influencia  en la evaluación del mundo. Lo que permitirá tener una visión global más completa mediante el descubrimiento de nuevas perspectivas de la investigación en América Latina, España, Portugal, el Caribe y África del Sur.

Esto supondrá que se podrá tener un perfil más adecuado de aquel contenido regional con influencia internacional y obtener datos críticos  del contenido regional con impacto internacional para obtener una imagen completa de los factores de influencia y los mecanismos conductores de la investigación regional.

Hacer conexiones con el panorama de la investigación más amplia, con la adición de la SciELO * Citation Index . Obtener una visión global más completa mediante el descubrimiento de nuevas perspectivas de la investigación en América Latina, España, Portugal, el Caribe y África del Sur.

SciELO Citation Index (SciELO CI) integrado a la plataforma del Web of Science (WoS) comenzó a operar regularmente a partir de enero de 2014. Representa un avance notable en la visibilidad internacional de las 750 revistas de SciELO, SciELO CI comparte las mismas funciones, recursos y la navegabilidad de la interfaz de WoS, en conjunto con las otras bases de datos que integran la plataforma WoS. De esta manera, los artículos publicados por las revistas en SciELO CI tendrán contabilizadas las citaciones que reciben de otros artículos de SciELO, de WoS y de las otras bases de datos. Todas las revistas SciELO con publicación actualizada serán indexadas en SciELO CI.

Se estima que SciELO CI integre entre 700 a 750 revistas, -ya hay incluidas unas 350r revistas- y más de de 4 millones de referencias citadas, y acceso abierto a muchas de ellas a través de Scielo. La actualización de los datos será semanal y el ingreso o exclusión de revistas será semestral. SciELO CI estará disponible a todos los suscriptores de la plataforma WoS sin costos adicionales.

 

de: SciELO Citation Index en el Web of Science. SciELO en Perspectiva. [viewed 08 March 2014]. Available from: http://blog.scielo.org/es/2014/02/28/scielo-citation-index-en-el-web-of-science/

Rankings ISSUE 2014 Indicadores sintéticos de las universidades españolas

Pérez, F., J. Aldás, et al.  [e-Book]  Rankings ISSUE 2014 Indicadores sintéticos de las universidades españolas. Madrid, Fundación BBVA, 2014.

Texto completo

El Proyecto U-Ranking, desarrollado en colaboración por la Fundación BBVA y el Instituto Valenciano de Investigaciones Económicas (Ivie), es una pieza central de un programa de actividades de ambas instituciones dirigido a documentar y analizar el papel del conocimiento en el desarrollo social y económico. Este documento presenta uno de los productos básicos de dicho proyecto, los Rankings ISSUE (Indicadores Sintéticos del Sistema Universitario Español), su metodología y los resultados correspondientes a la edición de 2014, la segunda que se presenta. El enfoque de ISSUE, la selección de las variables en las que se basan los rankings elaborados y la metodología seguida en el tratamiento de la información han sido exhaustivamente discutidos por el equipo del Ivie y con un amplio grupo de expertos en evaluación de universidades, información y gestión universitaria. Este documento presenta los resultados de la investigación desarrollada por el Ivie para construir la segunda edición de los Indicadores Sintéticos del Sistema Universitario Español (ISSUE), a partir del análisis de las actividades docentes, de investigación y de innovación y desarrollo tecnológico de las universidades. Los indicadores elaborados sirven de base para la elaboración de diversos rankings de las universidades españolas: dos rankings generales —uno de volumen de resultados (ISSUE-V) y otro de productividad (ISSUE-P)— así como otros más específicos: de docencia, de investigación, de innovación y desarrollo tecnológico, y de titulaciones concretas. Todos estos rankings constituyen aproximaciones a los resultados de las universidades que permiten compararlas desde distintas perspectivas. Mediante esas comparaciones, los indicadores sintéticos permiten evaluar su funcionamiento.

Guía para la evaluación de repositorios institucionales científico

Guía para la evaluación de repositorios institucionales científicos  (2014). [e-Book] Guía para la evaluación de repositorios institucionales científico. Madrid, REBIUN, 2014

Texto completo

Esta guía tiene como principal finalidad la de servir de herramienta de auditoria interna para mejorar la calidad de los repositorios, tanto si ya están en funcionamiento, detectando sus puntos fuertes y sus puntos débiles, como si están en fase de planificación, proporcionando diferentes aspectos a tener en cuenta. Para alcanzar un elevado estándar de calidad, la presente versión de la Guía para la evaluación de repositorios institucionales de investigación ofrece a toda la comunidad nacional un conjunto de directrices, basadas en criterios internacionales ya existentes, que garantizan la interoperabilidad de todos los recursos de acceso abierto y aseguran un acceso de calidad a sus contenidos. Además, en esta guía también se recogen los criterios obligatorios que marca RECOLECTA para ingresar en su plataforma.

¿Qué tiene que saber un investigador sobre acreditación y visibilidad científica?

 

24768137685_753538be92_b_d

Escuchar programa

Ir a descargar

Más programas de PLANETA BIBLIOTECA «Donde vive la información»

PLANETA BIBLIOTECA

En el programa de hoy hemos hablado y proporcionado algunos consejos sobre que cuestiones que tiene que tener en cuenta un investigador cuando desea ganar visibilidad científica de cara a los procesos de acreditación para plazas docentes. Hemos visto como se mide la ciencia, cuestiones sobre que es el factor de impacto de una revista, como conocer el factor de impacto, como buscar las citas de nuestras publicaciones, como generar un perfil en Google Académico y algunos consejos de cara a potenciar la visibilidad científica a través de gestores de referencias sociales, medidas altmétricas, participación en redes sociales de investigadores, acceso abierto. Un programa con algunas recomendaciones de utilidad para cualquier investigador que desee potenciar su identidad digital para acreditarse.

Cómo funciona Altmetric.com

 

 

Altmetric.com muestra el impacto de la investigación a sus autores y lectores en un modo muy visual por medio de los “Donut almetrics”. Monitorear, buscar y medir todas las conversaciones acerca de los artículos de una revista, así como los publicados por sus competidores.  Recoge las menciones de artículos académicos de todas partes de la Web mediante la recopilación de menciones en los periódicos, blogs, redes sociales y otros sitios web. En cuestión de minutos, permite al autor disponer de los datos Altmetrics para insertarlos y mostrarlos en su plataforma o aplicación. Hoy en día la base de datos Altmetric contiene menciones de más de 4 millones de fuentes de investigación (incluyendo artículos de revistas, bases de datos, imágenes, documentos, informes y más), y está en constante crecimiento. Para realizar un seguimiento de las menciones en línea para una parte específica de la investigación, se tiene en cuenta tres cuestiones

  1. Un documento fuente (artículo de revista, informes, imágenes)
  2. Un identificador (DOI, RePeC, PUbMed id, Arxiv ID, SSRN… )
  3. Menciones recibidas

 

Screen Shot 07/09/2015 a 15.49.47

los identificadores también ayudan a reconocer las diferentes versiones de una investigación y a su desambiguación. Por ejemplo, un artículo de una revista puede estar originalmente disponible en una plataforma editorial y con un DOI, y luego estar alojado en PubMed o en un repositorio institucional.

 

Cada uno de los colores de la rosca Altmetric representan una fuente diferente de la atención recibida por la publicación:

 

La cantidad de cada color en el donut cambiará dependiendo de qué fuentes ha recibido la atención los resultados de una salida de la investigación. En la siguiente figura vemos que cuando la atención ha sido recibida por medios de comunicación tiene fundamentalmente colores rojos, cuando las menciones vienen de blog tendrá un color predominantemente amarillo, y en el tercer donut la atención fundamental proviene de twitter

24655094031_3681b652ca_c_d

La ficha resumen proporciona los datos demográficos de los usuarios y la «puntuación en contexto» y cada pestaña muestra el nivel de atención que la investigación ha recibido y se compara con otros productos publicados en la misma época, o en la misma revista.

details

Ver sample de ficha resumen

La puntuación Altmetric es calculada automáticamente, por conteo ponderado en función de la atención recibida por la investigación. Se basa en 3 factores principales:

  • Volumen. número de menciones
  • Fuente. Cada categoría es puntuada de diferente forma. Por ejemplo puntúa más la mención en un artículo de prensa que en un blog. (ver tabla)
  • Autores. Puntúa en función de la categoría del autor que haya hecho la medición, o en que revista se haya hecho en función de su impacto o audiencia

En conjunto, el resultado final de la puntuación representa una aproximación ponderada de todas las menciones que se han hecho en diferentes medios a esa investigación. La puntuación para los artículos de Wikipedia es estática. Esto significa que si una investigaciónse ha  menciionado en Wikipedia, la puntuación se incrementará en 3 puntos. El redondeo siempre es con números enteros. En el caso de Twitter y Sina Weibo, los re-tweets se puntúan con 0.85 puntos, en lugar de 1, ya que reciben una mención de segunda mano en lugar de la atención inicial. El total combinado de estos re-tweets siempre se redondea al número entero más próximo. En el caso de noticias en medios de comunicación se les asigna un nivel, basado en el alcance que tiene ese medio. la puntuación por lo tanto depende del nivel de esa fuente de la noticia. Esto significa que una mención de un medio de comunicación nacional y popular, como The New York Times contribuirá más a la puntuación que una mención noticias de una publicación de nicho más pequeño, como Medicina 2minute.

24630924012_c191f0bed6_o_d

El algoritmo Altmetric.com calcula una puntuación global teniendo en cuenta el volumen, la fuente y el autor en función de las menciones que recibe un documento. Esto incluye las menciones de artículos académicos sobre los sitios de medios sociales (por ejemplo, Twitter, Facebook, Pinterest, Google+), blogs científicos, muchos medios de comunicación convencionales, incluyendo The New York Times, The Guardian, las publicaciones en idiomas distintos al inglés, como Die Zeit y Le Monde, y publicaciones de interés especial como Scientific American y New Scientist, y sitios de revisión por pares de referencia como Publons.

 

 

Las dinámica se basa en que noticias se ponderan más a través de los blogs y los blogs se ponderan más de tweets. El algoritmo también mide factores de carácter de autoridad de los autores, por lo que una mención por un experto en el campo vale más que una mención por un laico. La representación visual – la rosquilla Altmetric.com – muestra la distribución proporcional de menciones por tipo de fuente. Cada tipo de fuente viene representado por un color diferente – azul para Twitter, amarillo para los blogs, y el rojo para los principales medios de comunicación. Los enlaces a las fuentes de datos también están disponibles. Altmetric.com recoge alrededor de cien mil menciones a la semana, con cerca de 3.000 artículos nuevos incluidos cada día.

 

Planes y precios

Comparación de los indicadores altmetricos con las citas desde una perspectiva multidisciplinar

Costas, R., Z. Zahedi, et al. “Do “altmetrics” correlate with citations? Extensive comparison of altmetric indicators with citations from a multidisciplinary perspective.” Journal of the Association for Information Science and Technology vol., n. (2014).  pp. n/a-n/a.  Texto completo por suscripción

 

Análisis de la presencia de diferentes indicadores altmetricos proporcionados por Altmetric.com en distintos campos científicos, centrándose especialmente en su relación con las citas. Los resultados confirman que la presencia y densidad de los recuentos altmétricos siguen siendo muy bajas y es muy frecuente entre las publicaciones científicas, encontrar entre sólo un un 15% a un 24% de publicaciones que presentan alguna actividad altmétrica concentrada en las publicaciones más recientes, aunque su presencia ha aumentado con el tiempo. Las publicaciones de las ciencias sociales, humanidades y las ciencias médicas y de la vida muestran la más alta presencia de indicadores altmétricos, indicando su valor potencial y el interés para estos campos. El análisis de las relaciones entre altmetrics y citas confirma afirmaciones anteriores de correlaciones positivas pero relativamente débiles, lo que apoya la idea de que altmetrics no reflejan el mismo tipo de impacto que las citas. Además, los recuentos altmetrics no siempre presentan un mejor filtrado de las publicaciones más citadas de la revista. El valor de altmetrics como una herramienta complementaria de análisis de citas es evidente, aunque se sugiere que se debe investigar más profundamente sobre esta cuestión para desentrañar el significado y el valor de los indicadores para la evaluación de su potencial.

Guía de evaluación de los Servicios Bibliotecarios y de su contribución a la calidad del aprendizaje y de la investigación

Rodríguez, S., J. Bravo, et al. (2006 ). [e-Book]  Guía de evaluación de los Servicios Bibliotecarios y de su contribución a la calidad del aprendizaje y de la investigación Barcelona, Agència per a la Qualitat del Sistema Universitari de Catalunya

Texto completo

El Consejo de Dirección de la Agència per a la Qualitat del Sistema Universitari de Catalunya (AQU Catalunya) aprobó incluir en su planificación anual de 2005 la nueva evaluación transversal de los Servicios Bibliotecarios (SB) en Catalunya. Asimismo, el Departament d’Universitats, Recerca i Societat de la Informació (DURSI) encargó incluir en este proceso la evaluación del Consorcio de Bibliotecas Universitarias de Catalunya (CBUC). Esta GUÍA DE EVALUACIÓN DE LOS SERVICIOS BIBLIOTECARIOS Y DE SU CONTRIBUCIÓN A LA CALIDAD DEL APRENDIZAJE Y DE LA INVESTIGACIÓN se refiere al primer aspecto, la evaluación de los SB, de acuerdo con los objetivos y criterios que se citan en los correspondientes apartados del protocolo. Con el fin de elaborar la Guía, se constituyó un grupo de trabajo integrado por los estamentos académicos, la Dirección General de Universidades, representantes del CBUC y de AQU Catalunya.

Especial Altmetrics en ISQ: Information Standards Quarterly

Manual de Construcción de indicadores de evaluación compuestos: metodología y manual del usuario

Handbook on Constructing Composite Indicators : Methodology and user guide. Edtion ed. Paris: OECD, European Commision, 2008.

Texto completo

Este manual tiene como objetivo proporcionar una guía para la construcción y uso de indicadores compuestos, para los responsables políticos, académicos, medios de comunicación y otras partes interesadas. Si bien hay varios tipos de indicadores compuestos, este manual se ocupa de los que comparan el rango de rendimiento por países en áreas tales como la competitividad industrial, el desarrollo sostenible, la globalización y la innovación. El Manual tiene como objetivo contribuir a una mejor comprensión de la complejidad de los indicadores compuestos y la mejora de las técnicas utilizadas actualmente para construirlos. En particular, contiene un conjunto de directrices técnicas que pueden ayudar a los constructores de indicadores compuestos para mejorar la calidad de su outputs. Ha sido preparado conjuntamente por la OCDE (Dirección de Estadística y la Dirección de Ciencia, Tecnología e Industria) y la Unidad de Econometría y Estadística Aplicada del Centro Común de Investigación (CCI) de la Comisión Europea en Ispra, Italia. Los autores principales de la CCI son Michela Nardo, Michaela Saisana, Andrea Saltelli y Stefano Tarantola. Los autores principales de la OCDE son Anders Hoffmann y Enrico Giovannini. La asistencia editorial fue proporcionada por CandiceStevens, Günseli Baygan, Karsten Olsen y Sarah Moore