Archivo de la etiqueta: Evaluación

Elsevier expande sus perspectivas métricas con el lanzamiento de proyecto piloto altmetrics

Deja un comentario

[]

Elsevier que ha sido durante mucho tiempo un defensor a ultranza de la informetría robusta, parece ser que está particularmente interesada en la comprensión de cómo se pueden utilizar estas nuevas medidas en relación con los datos de uso y citación de sus artículos de revista, para proporcionar nuevos indicadores más significativos para la comunidad investigadora.

Altmetrics, (la medida de la actividad académica en las redes sociales y en las herramientas sociales), es una palabra de moda importante en este momento, y aunque es una disciplina muy nueva, su interés está creciendo rápidamente, como lo demuestran los volúmenes de búsqueda relativas en el siguiente gráfico.

[]

 

Con Internet y los avances en el análisis de ‘big data’ cada vez más interconectados, en la actualidad hay muchas maneras para medir el impacto de la investigación. Las estadísticas de Mendeley, por ejemplo, parece proporcionar más conocimientos sobre el uso académico de un documento que Twitter.

[]

Los datos bibliométricos tradicionales pueden ser complementados con datos de uso (visitas y descargas), mientras que el éxito de las comunidades y las herramientas en línea han dado lugar a una visibilidad más amplia para un comentario erudito, las estadísticas de lectores, y otras medidas de atención en línea. Altmetrics abarca la actividad social en forma de menciones en las redes sociales, actividad académica en las bibliotecas digitales, índices de popularidad en los gestores de referencias, comentarios erudito a través de blogs científicos y referencias en los medios sociales.

Altmetrics ofrecen una visión alternativa sobre el uso e impacto de la investigación sobre quienes leen artículos académicos, y esta información ha impulsado a autores, investigadores, editores a tratar de entender cual es la importancia de estos datos. Por ello, Elsevier ha empezado a participar en la proyecto NISO Altmetrcs y esta linea sigue en su proyecto Article Usage Reports, un programa que informa a los autores que han publicado en las revistas de Science Direct y Elsevier.com sobre cómo se está visualizando su artículo.

[]

 

Los datos proporcionados por Mendeley -que Elsevier adquirió el año pasado-, siguen proporcionando una fuente de datos invaluable y libre sobre situación de los investigadores en su disciplina. Ya que Mendeley recoge datos de más de 2 millones de investigadores a través de más de 100 millones de referencias compartidas que tienen el gestor de referencias.

[]

 

También Elsevier ha establecido relaciones  con alguna start-ups relacionada con altmetrics como Altmetric.com explorer un  producto para comprender y analizar las tendencias, así como informar a algunas de las campañas de marketing. Y se ha unido a un piloto  a través de Kudos para investigar cómo los autores de Elsevier pueden publicitar sus investigaciones. Incluso ha empezado a participar en un proyecto piloto enaltmetric.com

[]
Página de Elsevier.com con el «donut» de Almetrics.com

Altmetric.com muestra el impacto de la investigación a sus autores y lectores en un modo muy visual por medio de los “Donut almetrics”. Monitorear, buscar y medir todas las conversaciones acerca de los artículos de una revista, así como los publicados por sus competidores.  Recoge las menciones de artículos académicos de todas partes de la Web mediante la recopilación de menciones en los periódicos, blogs, redes sociales y otros sitios web. En cuestión de minutos, permite al autor disponer de los datos Altmetrics para insertarlos y mostrarlos en su plataforma o aplicación.

El algoritmo Altmetric.com calcula una puntuación global teniendo en cuenta el volumen, la fuente y el autor en función de las menciones que recibe un documento. Esto incluye las menciones de artículos académicos sobre los sitios de medios sociales (por ejemplo, Twitter, Facebook, Pinterest, Google+), blogs científicos, muchos medios de comunicación convencionales, incluyendo The New York Times, The Guardian, las publicaciones en idiomas distintos al inglés, como Die Zeit y Le Monde, y publicaciones de interés especial como Scientific American y New Scientist, y sitios de revisión por pares de referencia como Publons.

Las dinámica se basa en que noticias se ponderan más a través de los blogs y los blogs se ponderan más de tweets. El algoritmo también mide factores de carácter de autoridad de los autores, por lo que una mención por un experto en el campo vale más que una mención por un laico. La representación visual – la rosquilla Altmetric.com – muestra la distribución proporcional de menciones por tipo de fuente. Cada tipo de fuente viene representado por un color diferente – azul para Twitter, amarillo para los blogs, y el rojo para los principales medios de comunicación. Los enlaces a las fuentes de datos también están disponibles. Altmetric.com recoge alrededor de cien mil menciones a la semana, con cerca de 3.000 artículos nuevos incluidos cada día.

[]

Altmetrics y la comunicación de la investigación médica

Deja un comentario

screen-shot-2015-02-17-at-11-16-11-211x300

Adams, J. and T. Loach (2015). [e-Book]  Altmetric mentions and the communication of medical research. figshare., Digital Science, 2015.

Texto completo

 

¿Pueden los datos de las menciones a una investigación realizadas en los medios sociales proporcionar indicadores del impacto de la misma más allá del contexto académico? Este es el tema central de un estudio publicado por la consultora Digital Science. El estudio, financiado y encargado por Nesta a Jonathan Adams, y Tamar Loach, utilizó datos de Altmetric.com para examinar e identificar en que medida las menciones a las investigaciones en línea pueden proporcionar información sobre el impacto más amplio de un trabajo académico. Aunque el estudio se centra en el área de la Medicina, reconoce que hay motivaciones profesionales, académicas y sociales para tener en cuenta estas menciones, y reconoce que el desafío es discernir patrones válidos y adecuados para la compilación de estos datos.

A veces una mención  en un medio social tiene un valor innovador en la comunicación más allá del mundo académico. Para ello se recopilaron menciones de de más 2,5 millones de documentos de investigación procedentes de Altmetric.com. Se comprobó que  muchos de los artículos de revistas de alto impacto que tienen muchas menciones en medios sociales no siempre tienen más citas. Por ello el estudio propone que hay dos tipos principales de comunidades que tienen en cuenta regularmente una investigación publicada en línea, y las características de cada una pueden ser distinguidas en función de diferentes motivaciones:

Impacto en las comunidades de práctica.

Que facilitan la comunicación rápida y accesible a los resultados más innovadores de la investigación para los profesionales del sector de la salud también, pero que a su vez agregan valor para  usuarios y administradores. El análisis confirmó que muchas de las motivaciones recogidas sobre una investigación mencionan y destacan la importancia del potencial de comunicación.

Impacto en las comunidades de interés.

Los pacientes, cuidadores, organizaciones médicas y asociaciones de familiares en torno a una enfermedad, representan una red que quiere conocer, comprender y comunicar la investigación e innovación sobre nuevos tratamientos. El análisis estadístico mostró que aquellas investigaciones que recibieron más menciones en medios sociales sobre los documentos relacionados con las enfermedades abordadas por las asociaciones y organizaciones accedieron a fondos de investigación mayores.

El estudio señala que las redes de salud y clínicas pueden aportar ayuda oportuna, rápida y mecanismos de comunicación adecuados para la investigación innovadora con beneficios sociales y profesionales, aunque no académicos, pero es posible que necesiten de personas clave como nodos activos para involucrarlos.

Inovaciones en medición científica y académica

Deja un comentario

[]

Das, A.-K.  [e-Book] Innovations in Measuring Science and Scholarship, UNESCO, Paris, 2015.

Texto completo

Esta Unidad se ocupa de la descripción de herramientas de análisis e indicadores utilizadas en la evaluación de información científica: Web of Knowledge, Scopus,Indian Citation Index , CiteSeerX, Google Scholar Citations, Journal Citation Reports (JCR), SCImago Journal Rank

Todas ellas de alcance internacional excepto Indian Citation Index (ICI). ICI no es muy conocido fuera de la India, aunque si es una herramienta poderosa para medir la literatura científica de este, aunque será de utilidad para otros países en la medida que en muchas revistas indias se publican una cantidad considerable de literatura extranjera. En el capítulo se describen los productos analíticos con métricas de rendimiento de artículso de revistas como Journal Citation Reports (JCR) . En el capítulo titulado New Platforms for Evaluating Scholarly Communications se describen tres sitios web: SCImago Journal & Country Ranking (SJR),eigenFACTOR.org, JournalMetrics.com y un software llamado Publish or Perish (POP) Software.

Artículos y métricas a nivel de autor (Altmetrics)

Deja un comentario

[]

Das, A.-K.. [e-Book]  Article and Author Level Measurements Paris, UNESCO, 2015.

Texto completo

Los identificadores de autores son absolutamente esenciales para la búsqueda en base de datos, ya que por ejemplo un nombre como D Singh, puede ser identificado como Dan Singh, Dhan Singh, Dhyan Singh, Darbara Singh, Daulat Singh y Durlabh Singh. La web ResearcherID, lanzada por Thomson Reuters, es un registro global de autores e investigadores en la web que individualiza cada nombre. Al igual que ORCID, que es también es un registro que identifica de forma única un autor o investigador. Estos identificadores cobran aún más importancia cuando hablamos de métricas a nivel de autor (Altmetrics) que recopilan datos a través de herramientas tales como Altmetric.com y ImpactStory.org, o de redes sociales académicas como ResearchGate.net, Academia.edu, GetCited.org,. Fuentes todas ellas de importancia capital cuando se trata de evaluar la actividad de autores e investigadores de artículos a nivel de métricas (Altmetrics), redes sociales académicas redes o revistas regionales con indicadores bibliométricos.

Research Evaluation Metrics

Deja un comentario

6692baa70d8d53c356d6c135d6963274

Research Evaluation Metrics.  [e-Book] Paris, Unesco, 2015.

Texto completo

En la actualidad, la evaluación de la investigaciones es una cuestión que se está replanteando en todo el mundo. En algunos casos, los trabajos de investigación están generando resultados muy buenos, en la mayoría de los casos los resultados son mediocres, y en algunos casos negativos. Por todo esto, la evaluación de los resultados de la investigación se convierte en una condición sine qua non. Cuando el número de investigadores eran menos, eran los propios colegas de profesión quienes evaluaban la investigación. Con el paso del tiempo, el número de investigadores aumentó, las áreas de investigación proliferaron, los resultados de la investigación se multiplicaron. La tendencia continuó y después de la Segunda Guerra Mundial, la investigación comenzó a crecer exponencialmente. Hoy en día, incluso en una estimación moderada hay alrededor de más de un millón de investigadores y producen más de dos millón de trabajos de investigación y otros documentos por año. En este contexto, la evaluación de la investigación es una cuestión de primera importancia. Para cualquier promoción, acreditación, premio y beca puede haber decenas o cientos de nominados. De entre éstos, seleccionar el mejor candidato es una cuestión difícil  de determinar. Las evaluaciones inter pares en muchos casos están demostrando ser subjetivas. En 1963 se crea Science Citation Index (SCI) que cubre la literatura científica  desde 1961. Unos años después, Eugene Garfield, fundador del SCI, preparó una lista de los 50 autores científicos más citados  basándose en las citas que recibía el trabajo de un autor por parte de los trabajos de otros colegas de investigación. El documento titulado “¿Pueden predecirse los ganadores del Premio Nobel? ‘Fue publicado en 1968 (Garfield y Malin, 1968). En el siguiente año es decir, 1969, dos científicos que figuran en la lista, por ejemplo, Derek HR Barton y Murray Gell-Mann recibieron el codiciado premio. Esto reivindicó la utilidad del análisis de citas. Cada año, varios científicos pertenecientes al campo de la Física, Química, Fisiología y Medicina reciben el Premio Nobel. De esta manera el análisis de citas se convirtió en una herramienta útil. Sin embargo, el análisis de citas siempre tuvo críticas y múltiples fallas. Incluso Garfield comentó – “El Uso del análisis de citas de los trabajos de evaluación es una tarea difícil. Existen muchas posibilidades de error ‘(Garfiled, 1983). Para la evaluación de la investigación, se necesitaban algunos otros indicadores. El análisis de citas, junto con la revisión por pares garantiza el mejor juicio en innumerables casos. Pero se necesita algo que sea más exacto. La llegada de la World Wide Web (WWW) brindó la oportunidad; pues un buen número de indicadores se están generando a partir de los datos disponibles en la WWW.

Libro blanco sobre las políticas de acceso abierto del Instituto Max Planck

Deja un comentario

[]

Schimmer, R., K. K. Geschuhn, et al. “Disrupting the subscription journals’ business model for the necessary large-scale transformation to open access. A Max Planck Digital Library Open Access Policy White Paper.” Max Planck Digital Library vol., n. (2015)

Texto completo

La interrupción de modelo de negocio de las revistas de suscripción hace necesaria su transformación a gran escala en favor del acceso abierto. Las revistas existentes, con sus funcionalidades bien probadas, se deben conservar y desarrollar para satisfacer las demandas de investigación del siglo 21, mientras que los flujos de pagos subyacentes experimentan una importante reestructuración. Existe un contexto suficiente para dar un impulso decisivo hacia la publicación de acceso abierto. Las diversas iniciativas existentes deben ser coordinadas con el fin de converger en esta meta. El carácter internacional de la investigación implica que esta transformación se logre a escala global, aunque sólo a través de un consenso de las organizaciones de investigación más eminentes del mundo.

Todos los indicios apuntan a que el dinero ya invertido en el sistema de publicación de la investigación es suficiente para permitir una transformación que sea sostenible para el futuro. Es necesario que haya un entendimiento compartido para que el dinero actualmente empleado en el sistema de suscripción de revistas sea retirado y re-invertido en servicios de publicación de acceso abierto. Los presupuestos actuales invertido para adquisiciones por parte de las bibliotecas deben ser el depósito final para permita la transformación sin riesgo financiero alguno o de otro tipo. El objetivo es preservar los niveles de servicio establecidos proporcionadas por los editores que aún son demandados por los investigadores, al tiempo que se vayan re-definiendo y reorganizando los flujos de pagos necesarios. Al alterar el modelo de negocio subyacente, la viabilidad de la publicación de revistas se puede conservar y asentarse sobre una base sólida para los desarrollos académicos del futuro.

101 Herramientas en Comunicación Científica

Deja un comentario

[]

ENCUESTA SOBRE INNOVACIÓN EN LA COMUNICACIÓN ACADÉMICA 

Las innovaciones en la comunicación académica
El Cambio de flujo de trabajo de Investigación
¿Qué herramientas tradicionales e innovadores se utilizan en las distintas fases de su flujo de trabajo de investigación?

Para obtener más información sobre esta encuesta, visite
http://101innovations.wordpress.com

[]

La Biblioteca Pública de Vancouver considerada el mejor sistema de bibliotecas en el mundo

4 respuestas

.

Según un estudio realizado por la Universidad Heinrich Heine de Düsseldorf, la Vancouver Public Library y Montreal public-library fueron calificados como las bibliotecas Número 1 en el mundo.

 

 

Las ciudades son espacios informativos prototípicos de la sociedad del conocimiento. Las bibliotecas públicas juegan un papel importante como parte de este entorno inteligente de los conocimientos e infraestructuras creativas de estas ciudades. Las bibliotecas tienen valor económico como factores de localización en los dos espacios informativos tanto en el mundo físico como en el digital.

Vancouver Public Library es considerada el mejor sistema de bibliotecas en el mundo. Una de las claves es que la biblioteca no sólo proporciona la literatura a los ciudadanos, sino que también actúa como un refugio para los sin techo. Para llegar a esta afirmación el estudio llevo a cabo un análisis de los servicios prestados por las bibliotecas y los espacios digitales y físicas de los 31 centros de biblioteca más grandes del mundo. Las bibliotecas fueron valoradas por sus servicios, espacios físicos y recursos en línea, así como la manera que apoyan a sus ciudadanos. Otras bibliotecas públicas reconocidas en la lista, que se ha publicado en LIBRI: International Journal of Libraries and Information Services incluyen las bibliotecas públicas de Toronto, Chicago, San Francisco y Shanghai.

Muchas de las bibliotecas del estudio ofrecen recursos electrónicos a sus ciudadanos sobre todo, libros electrónicos, revistas electrónicas y bases de datos bibliográficas. Las bibliotecas ofrecen servicios de referencia digitales a través de formularios de correo electrónico y Web. Su presencia en los medios sociales está dominado por mensajes en Facebook y Twitter. Casi todas las bibliotecas públicas analizadas representan hitos arquitectónicos atractivos en su región. Además de ofrecer espacios para los niños, las bibliotecas ofrecen espacios para aprendizaje en común y, en menor medida espacios de trabajo modulares. La mayoría de las bibliotecas ofrecen Wi-Fi dentro de sus edificios; más de la mitad de las que se investigaron en el trabajo disponen de tecnología RFID. Pero la biblioteca pública prototípica en la sociedad del conocimiento tiene dos servicios principales: (1) Ser un soporte para sus ciudadanos, empresas y administraciones de la ciudad y/o región con servicios digitales, a saber, recursos electrónicos, así como los servicios de referencia para comunicarse con sus usuarios a través de los medios de comunicación social; y (2) Proporcionar espacios físicos de encuentro, de aprendizaje y de trabajo, así como áreas para niños y otros grupos, en un edificio que es un símbolo de la ciudad.

Un aspecto que también se tuvo en cuenta fue del amplio apoyo social de la biblioteca, en el caso del sistema de bibliotecas de Vancouver, el 94 por ciento de los residentes consideraron que estaban dispuestos a apoyar a su biblioteca con el dinero de sus impuestos. Es el tercer sistema de bibliotecas más grande de Canadá y el 62 por ciento de la gente dice que no leería libros si no tuviera la biblioteca.

El sistema bibliotecario VPL fue fundado en 1869, y la primera sucursal establecida se contruyo en el barrio de Kitsilano en 1927. Actualmente la VPL se ubica en un edificio de nueve plantas con más de 32.000 metros cuadrados y tiene capacidad para 700 puestos de estacionamiento de vehículos en su zona subterranea.

.

Áreas de lectura y de estudio a los que se accede por puentes sobre patios de luces

.

La decisión de construir el proyecto surgió después de un referendum público favorable A su realización en noviembre de 1990. La ciudad llevó a cabo un concurso para elegir un diseño para el nuevo edificio de la biblioteca. El diseño presentado por Moshe Safdie fue el más radical de todos los presentado y sin embargo el favorito del público. El edificio actual ocupa una manzana de la ciudad en el centro de Vancouver, se trata de un espacio rectangular de nueve pisos enmarcado en una superficie elíptica. Esta explanada con techo de cristal sirve como un vestíbulo de entrada a la biblioteca y como centro de actividades con áreas de lectura y de estudio a los que se accede por puentes sobre patios de luces con luz natural. Como si fuera una metáfora de su capacidad de acogida e integración ciudadana, los espacios públicos que rodean la biblioteca forman una plaza permanentemente abierta al público.

.

un espacio rectangular de nueve pisos enmarcado en una superficie elíptica

.

El exterior del edificio se asemeja al Anfiteatro de Flavio o Más conocido como el Coliseo de Roma. Además de su función como biblioteca central del sistema y de la ciudad, el proyecto también incluye tiendas, restaurantes, y un aparcamiento público subterráneo. El edificio de la Biblioteca cuenta con un jardín en en la azotea diseñado por la arquitecto paisajista Cornelia Oberlander. El jardín de la azotea no es accesible al público.

.

.

En 2013 la VPL atendió a cerca de 428.000 miembros activos, tuvo más de 6,9 millones de visitas y prestó 9,5 millones de artículos que incluyen: libros, libros electrónicos, CD, DVD, periódicos y revistas.

Cómo realizar el seguimiento del impacto de los datos de Investigación con métricas

Deja un comentario

Ball, A. and M. Duke (2015). [e-Book] How to Track the Impact of Research Data with Metrics’. DCC How-to Guides Edinburgh, Digital Curation Centre, JISC, 2015.

Texto completo

Esta guía tiene como cometido ayudar a realizar un seguimiento y medir el impacto de los datos de la investigación, ya sea propia o de un departamento, institución o grupo de investigación. Proporciona una visión general de los conceptos clave de medición del impacto así como de los servicios y herramientas disponibles para medirlo. Después de discutir algunos de los temas y retos actuales, ofrece algunos consejos sobre cómo aumentar el impacto de nuestros datos de investigación. Esta guía está dirigida a los analistas que trabajan con datos de investigación y administradores que trabajan en temas relativos a la evaluación de calidad de la investigación, bibliotecarios y en general a cualquiera que desee  realizar un seguimiento del impacto de los datos dentro de una institución. Entre los temas que se abordan están los siguientes:

– ¿Por qué medir el impacto de los datos de investigación?

– Conceptos de medición de impacto

– impacto y servicios de medición

– Retos y problemas actuales de la medición

– Consejos para aumentar el impacto de los datos de investigación.

Sobre la importancia del artículo de revista, la revisión científica y el impacto de la investigación

Deja un comentario

 
bibliometricswordcloudimagev2
.

Me ha parecido muy interesante el post de Heidi Laine investigadora de la Universidad de Helsinki y coordinadora de Open Knowledge Finland Open Science working group  publicado en el blog LSE: London School of Economic and Political Science, por lo que os dejo este resumen del contenido, que puedes leer completo en:

.

Laine, Heidi. The case against the journal article: The age of publisher authority is going, going, gone — and we’ll be just fine.LSE: London School of Economic and Political Science. July 14th, 2015

Texto completo

 

La autora considera que a menudo se dice que el artículo de revista es fundamental para el proceso de comunicación de la investigación. Ella sostiene que el artículo de revista (al menos como lo conocemos) en un futuro no lejano se convertirá en una cosa del pasado, y que será reemplazado por informes de estilo, artículos narrativos, blogs, wikis, grabaciones de vídeo y audio, documentos de conferencias y presentaciones. Además dice que el artículo académico para la comunidad científica es actualmente más parte del problema que de la solución. Y se pregunta ¿Por qué dependemos de estas revistas y sus artículos que acaparan el dinero de los contribuyentes, los derechos de autor de los investigadores y la creación de incentivos distorsionados? ¿El sistema sirve para otro objetivo que no pueda ser satisfecho por cualquier otro medio? En contestación a estas cuestiones propone:

Función 1: Difusión de los conocimientos científicos. Plantea las posibilidades de Internet como medio de comunicación científica y dice que el reto de las audiencias puede ser superado si se pone más esfuerzo en enseñar habilidades de comunicación de la ciencia en la enseñanza de pregrado y posgrado.

Función 2: Discusión de la ciencia entre los colegas. Según la autora el artículo de revista carece en buena medida de esta característica y que los nuevos medios son más apropiados para la discusión académica a través de canales como Twitter, ResearchGate, blogs … donde cualquier persona puede participar en tiempo real. Si bien, un comentario publicado en un blog aunque no sea tan completo como un artículo, pero en cambio debe tener en cuenta toda una discusión que a veces puede contener suficientes ideas nuevas para una docena de artículos. El original proyecto Polymath es un poderoso ejemplo de esto.

Función 3: Mantenimiento de la calidad de la investigación científica a través de la revisión por pares. Hace unas semanas Transparency and Openness Promotion Committee publicó las nuevas directrices para revistas de ciencias  Su objetivo es “llevar la comunicación científica hacia una mayor apertura” exigiendo una mayor  reproducibilidad y transparencia de los datos de la publicación. El problema es que carecen de cualquier mención de revisión abierta entre iguales, código abierto, datos abiertos o libre acceso. La solución a todo esto sería una revisión por pares abierta, tal como se establece en Open Science Peer Review Oath, donde en lugar de las revistas, el proceso de revisión podría ser manejado por las diferentes y numerosas sociedades científicas, como las academias científicas y asociaciones científicas.

Función 4: Ayudar a calcular el factor de impacto para así determinar el mérito académico. Pone en cuestión el Factor de impacto, y propone nuevos medios de medición que ayuden a aumentar la transparencia del método científico y la reproducibilidad de los resultados de la investigación siguiendo los principios y aplicación de la llamada ciencia abierta, apoyando la transparencia de ideas, reproducibilidad y en última instancia, un mayor impacto social. Según la autora seguir estas pautas ayudará a mejorar los trabajos publicados, aumentará la confianza y, en última instancia, proporcionará  beneficios estratégicos a los autores y sus instituciones, ya que actualmente es posible disponer de información sobre el impacto de una publicación a través de colegas, medios sociales, medios de comunicación tradicionales, etc.