Archivo de la etiqueta: Evaluación

¿Cómo evaluar una biblioteca digital?

led-book-installation-bookshelves

Stacy Konkiel «15 types of data to collect when assessing your digital library.» Almetric, 2016.

Texto completo

Se invierten millones de dólares por año en la construcción de la tecnología de una biblioteca digital en aspectos tales como la digitalización de contenidos y la creación de la infraestructura de código abierto. Pero, sorprendentemente, no se sabe mucho acerca de cómo  se están utilizando en realidad las colecciones de la bibliotecadigital.

En este documento se recogen algunas recomendaciones realizadas por expertos sobre que datos cuantitativos y cualitativos se han de tener en cuenta en la evaluación de una biblioteca digital, así como las herramientas que se puede utilizar para agilizar la recogida de datos. las mediciones recogidas por las herramientas altmétricas son una parte importante, en este post se aportan algunos enfoques que se puede utilizar para recoger los datos de este género.

Evaluación del impacto en la práctica

9781464807794-pdf

Gertler, P. J., S. Martinez, et al.  Impact Evaluation in Practice, Second Edition, [e-Book] The World Bank, 2016

Texto completo

1a. ed

La segunda edición del manual de evaluación de impacto en práctica es una introducción completa y accesible para la evaluación del impacto del desarrollo.por parte de los responsables políticos y otros profesionales  Publicado por primera vez en 2011, se ha utilizado ampliamente en todas las comunidades académicas. El libro incorpora ejemplos del mundo real para presentar directrices prácticas para el diseño e implementación de evaluaciones de impacto.

Los lectores obtendrán un entendimiento de las evaluaciones de impacto y las mejores formas de utilizarlas para diseñar políticas y programas basados en la evidencia. La versión actualizada cubre las más novedosas técnicas para la evaluación de programas e incluye asesoramiento sobre la ejecución del estado de la técnica, así como un conjunto amplio de ejemplos y estudios de casos que se basan en retos de desarrollo actuales. También incluye nuevo material sobre la ética de la investigación para llevar a cabo la evaluación de impacto.

El manual está dividido en cuatro secciones: en la primera parte se analiza qué evaluar y por qué; en la segunda parte se presentan los principales métodos de evaluación de impacto; En la parte tres cómo manejar la evaluación del impacto; y en la parte cuatro opiniones sobre muestreo de la evaluación y recopilación de datos. Los estudios de casos ilustran las diferentes aplicaciones de las evaluaciones de impacto. El libro ofrece enlaces a material complementario de instrucción disponible en línea, incluyendo un caso aplicado, así como las preguntas y respuestas.

Libro Blanco sobre la Medición de Audiencias Digitales

blancodigital-8b00f

Libro Blanco sobre la Medición de Audiencias Digitales


Cuadernos de comunicación Interactiva, 2008

Descargar

La medición de audiencias digitales deberá guiarse por los siguientes principios generales básicos:

Consenso: acordada por todos los actores del mercado, en especial por los dos grandes agentes publicitarios, compradores y vendedores.

Solvencia y viabilidad: que cuente con una base técnica suficiente, bajo el consenso antes mencionado, que dé respaldo a sus mediciones y permita el análisis pormenorizado de su información. Además, debe ser viable en su desarrollo, de tal forma que su aplicación real corresponda con el marco teórico de su diseño.

Transparencia: abierta a la auditoria de sus usuarios y a sus propuestas consensuadas, como suficientemente se explicita en sus características metodológicas.

Adaptación al mercado local: sus mediciones, variables e indicadores deben adaptarse a las necesidades del mercado español. Asimismo, debe contar con recursos que permitan ofrecer un servicio adecuado a las necesidades técnicas, comerciales y de desarrollo del mercado.

Publicitaria: además de ser la referencia del consumo de los medios digitales, debe estar orientada a servir las necesidades del mercado publicitario. Unicidad: que sirva para la determinación de la moneda única de intercambio comercial en el mercado publicitario, de acuerdo a las características detalladas en el presente documento. Es precisa la creación de un Comité de Usuarios, órgano garante del cumplimiento de los Principios Generales. Este comité deberá supervisar además el correcto desarrollo de la operación de medición. Las decisiones de este comité deben ser ejecutivas y aplicables a la medición, siempre y cuando no vayan contra su solvencia técnica.

El Comité de Usuarios estará formado por representantes de los agentes del mercado bajo los principios de representatividad y consenso. Se regulará internamente a través de un reglamento de actuación. Además de estos principios generales se detallan a continuación los puntos necesarios que debe contemplar la medición.

Guía para evaluar las bibliotecas de instituciones de educación superior

20843632318_062787e601_o_d

 Guía para evaluar las bibliotecas de instituciones de educación superior.  [e-Book] México, Consejo Nacional para Asuntos Bibliotecarios de las Instituciones de Educación Superior

Texto completo

Se sumaron esfuerzos para elaborar la Guía para evaluar bibliotecas de instituciones de educación superior, la cual tiene como propósito: • Compromiso para las IES en la asignación de recursos que coadyuven al fortalecimiento del quehacer bibliotecario • Referente para la identificación de logros y circunstancias que afronta la prestación del servicio bibliotecario

¿Sigue siendo el artículo de revista relevante en el proceso de comunicación científica?

140715_edu_peerreview-crop-original-original

The case against the journal article: The age of publisher authority is going, going, gone — and we’ll be just fine. LSE, 2015

«El artículo científico para la comunidad científica es actualmente más parte del problema que de la solución… «

Heidi Laine «Open Knowledge Finland Open Science working group»

Heidi Laine coordinadora de Open Knowledge Finland Open Science working group considera que a menudo se dice sin fundamento que el artículo de revista es fundamental para el proceso de comunicación de la investigación. Ella sostiene que el artículo de revista (al menos como lo conocemos) en un futuro no lejano se convertirá en una cosa del pasado, y que será reemplazado por informes de estilo, artículos narrativos, blogs, wikis, grabaciones de vídeo y audio, documentos de conferencias y presentaciones. Además dice que el artículo científico para la comunidad científica es actualmente más parte del problema que de la solución. Y se pregunta ¿Por qué dependemos de estas revistas y sus artículos, que acaparan el dinero de los contribuyentes, los derechos de autor de los investigadores y la creación de incentivos distorsionados? ¿El sistema sirve para otro objetivo que no pueda ser satisfecha por cualquier otro medio?

Análisis del entorno de las bibliotecas universitarias y de investigación ACRL 2015

environmentalscan

Environmental Scan 2015, ACRL Research Planning and Review Committee, [e-Book]  ACRL, 2015.

Texto completo

Cada dos años, el Comité de Planificación y Análisis de Investigación ACRL realiza un análisis del entorno de la educación superior, en la que se tiene en cuenta el potencial de impacto en las bibliotecas universitarias. La exploración del entorno 2015 ofrece una amplia revisión del actual panorama de la educación superior, con especial atención a la situación de las bibliotecas universitarias y de investigación. El documento se basa en informes anteriores de ACRL, incluyendo las principales tendencias en las bibliotecas universitarias.

En un momento de creciente desigualdad económica en los Estados Unidos,que en el contexto educativo se correlaciona con el nivel de ingresos y la asequibilidad de la educación superior, que se ha convertido en un tema frecuente en los medios de comunicación. A su vez los niveles de financiación de la investigación han disminuido, lo que lleva a un cada vez más competitivo. Al mismo tiempo, se vislumbra la necesidad de una gestión adecuada de los datos de uso intensivo en los dominios de la investigación, lo que implica que se deban introducir nuevos requisitos de infraestructura, servicios de gestión. Por ello el gobierno federal ha emitido mandatos de acceso abierto para la investigación científica financiada por organismos públicos. Las agencias federales han presentado y están revisando actualmente la liberación de los planes para cumplir con estas políticas.

Por otra parte la tecnología está avanzando hacia nuevos modelos en la educación superior. Los modelos de educación abierta ofrecen alternativas convenientes a los programas tradicionales basados en la presencialidad. los Cursos Abiertos Masivos en Línea (MOOCs) y los modelos de educación basada en competencias (CBE) representan esas alternativas a tener en cuenta. El aprendizaje en línea es una opción atractiva para los estudiantes adultos, un grupo demográfico que ha sido el centro de muchas de las grandes instituciones con fines de lucro; estos estudiantes pueden completar los programas de grado y otras credenciales a un ritmo autodeterminado y un costo más bajo. El entorno actual «ofrece nuevas formas de conectar cosas que antes se consideraban dispares y «no-conectables ‘: las personas, los recursos, las experiencias, contenidos diversos, y las comunidades, así como a expertos y novatos, sistemas de enseñanza formales e informales, además de poder contar con tutores y asesores.

Las bibliotecas están reevaluando sus prácticas de adquisición y las estrategias de desarrollo de colecciones desde un enfoque más integral, particularmente a la luz de las nuevas diversificación del expediente académico (por ejemplo, recursos educativos abiertos objetos de aprendizaje, recursos digitales de libre acceso, etc.). Para hacer frente a esta nueva diversificación, Dempsey, Malpas y Lavoie (2014) ofrecen una matriz útil basada en la administración, la escasez, y la singularidad de los recursos que pueden proporcionar una guía para administradores de colecciones.

Análisis comparado entre las herramientas de evaluación de calidad para MOOCs: ADECUR vs Norma UNE 66181: 2012

mooq_logo_retina

Ramirez Fernandez, M., J. L. Salmerón Silvera, et al. «Comparative between quality assessment tools for MOOCs: ADECUR vs Standard UNE 66181: 2012.» RUSC. Universities and Knowledge Society Journal vol. 12, n. 1 (2015). pp. 131-144.

Texto completo

Los cursos abiertos en línea y masivos (en adelante MOOC) se han considerado en la literatura divulgativa y científica como una revolución con un gran potencial en el mundo educativo y formativo. Sin embargo, al mismo tiempo, existen discrepancias y cuestionamientos sobre el valor pedagógico y el alcance que tendrá el movimiento en la educación superior. Así pues, el universo de los MOOC es objeto de reflexión didáctica y formativa entre diferentes autores e instituciones en el mundo globalizado, pero todavía son necesarias unas dimensiones y unas implicaciones de la visión evaluadora de los mismos que deben ser valoradas y analizadas desde diferentes puntos de vista.En este artículo se presenta un panorama comparativo de los indicadores de calidad de dos instrumentos de evaluación de los cursos MOOC: la Norma UNE 66181:2012 sobre la gestión de la calidad de la formación virtual y el instrumento de análisis didáctico de modelo y estrategias de enseñanza de cursos universitarios en red (ADECUR). Por último, se planteará un diseño de herramienta de evaluación de calidad de cursos MOOC en base a las fortalezas de los dos instrumentos analizados.

Ver

http://mooc-quality.eu/

Mapa de la investigación científica del mundo

28387827482_b430cbd721_b_d

«This map of the world’s scientific research is disturbingly unequal» Laura Czerniewicz Associate professor, University of Cape Town en Quartz July 11, 2015

Ver completo

Mapa de la investigación científica del mundo con una gran desigualdad. Esta imagen refleja un punto dramático sobre las complejidades de las desigualdades mundiales en la producción y el intercambio de conocimientos.Si los territorios del mundo fueran asignadas de acuerdo a la cantidad de trabajos de investigación científica que se producen en cada país, tendría un aspecto bastante extraño, irregular. El hemisferio norte sería mucho más grande que en la realidad. El sur global, incluyendo África, se fundiría fuera del mapa. Esta imagen muestra un punto dramático sobre las complejidades de las desigualdades mundiales en la producción de conocimiento y el intercambio de información. Entonces, ¿qué está impulsando esta desigualdad y cómo puede corregirse?

El dinero. El dinero y la tecnología son necesarios para producir la investigación. La investigación y el desarrollo de intensidad media, es decir, cuanto dinero del porcentaje del PIB se destina para investigación. En los países de la OCDE fue del 2,4% en 2009. Sin embargo, pocos países en desarrollo había destinado a investigación el 1%. Sin suficientes fondos los investigadores deben dedicar una gran parte de su tiempo en la recaudación de fondos en organizaciones de subvención fuera de sus universidades. Esto significa menos tiempo para invertir en  la propia investigación.

Cuando se trata de tecnología, el ancho de banda es una normalidad en el Norte global lo que facilita la conexión con otros investigadores. Internet es mucho más lento y más caro en África, por lo que la colaboración entre los investigadores es más complicada en el continente que para los investigadores de EE.UU., Europa y Asia.

Estas cuestiones técnicas, financieras e incluso mecánicas son fáciles de identificar. No todo es dinero y tecnología, hay más cuestiones en liza. Pero en muchos casos no es que no haya investigación, el problema es que es poco visible. Las revistas científicas que publican la investigación que define este extraño mapa no son neutrales, los compromiso económicos y comerciales hacen que los niveles de participación en estos medios de comunicación científica sean desiguales.

Un estudio de cuatro revistas de alto impacto en ciencias sociales encontró que estas revistas atrajeron a los autores de muchos países de todo el mundo, pero sus lugares de investigación se encuentran significativamente en Europa y América del Norte. Esto sugiere que los investigadores locales utilizarán sus escasos recursos técnicos y financieros para ser publicado en revistas de alto impacto de ámbito internacional, en lugar de invertir en el desarrollo de la investigación local.

Hay otro problema con este mapa «La investigación invisible», las revistas: mide artículos de revistas de ciencia como la única representación de los resultados de la investigación científica. No tiene en cuenta otros productos y formatos como monografías, documentos de trabajo, informes técnicos y políticos (reports) que son los principales mecanismos de comunicación científica en ámbitos como las ciencias sociales y humanidades géneros. Además de interpretar el término ciencia como ciencias puras y aplicadas.Y es en estos géneros donde más a menudo prevalece las áreas de investigación de cuestiones más importantes y urgentes en los países en desarrollo. Por lo que sería conveniente establecer mecanismos de demostrar su valía, ya sea a través de nuevas maneras de evaluación científica o de nuevas métricas que valoren el impacto y el valor para el uso y reutilización de esta investigación.

Esta situación mejorará gracias a las políticas de acceso abierto que en la actualidad se están desarrollando fundamentalmente en la Unión Europea, el Reino Unido y en otros lugares del norte. Estas políticas aumentarán sustancialmente el volumen de investigación para que los estudiosos y lectores de todo el mundo tengan acceso. Pero hay un peligro irónico en esta disponibilidad más omnipresente. Si el mundo en desarrollo no tiene políticas nacionales y regionales similares y si los recursos no están disponibles para apoyar activamente la difusión abierta en estos países, la investigación del mundo en desarrollo será aún más invisible.Haciéndoles más dependientes aún de la capacidad intelectual del Hemisferio Norte.

Para comenzar a cambiar el mapa se requerirán varios pasos. En primer lugar, la mejora de la financiación y la infraestructura tecnológica. Al mismo tiempo, las propias percepciones de lo que se considera «ciencia» deben ser ampliadas para extenderse del mismo modo a las ciencias sociales y humanidades. Otro tema relacionado con este es que los resultados de la investigación sean reconocidos más allá de los límites del artículo. Por otro lado, los incentivos y sistemas de recompensa necesitan ser ajustados para alentar y legitimar prácticas científicas más justas, que son posibles en un mundo digital en red.

Y, por último, el movimiento de acceso abierto necesita ampliar su enfoque desde el acceso al conocimiento a la plena participación en la creación de conocimiento y en la comunicación académica.

La naturaleza, la escala y los beneficiarios del impacto de la investigación

ba3baa_fe4b9acf623c4f50a51109c7ac871210

 The nature, scale and beneficiaries of research impact: An initial analysis of Research Excellence Framework (REF) 2014 impact case studies. . [e-Book] London, King’s College London and Digital Science, 2015

Texto completo

Este informe se basa en un análisis de los 6.679 casos de estudio de impacto que se presentaron a la convocatoria sobre Excelencia en el marco de Research Excellence Framework (REF) 2014.

El informe analiza la naturaleza, la escala y el impacto de los beneficiarios no académicos de la investigación usando una combinación de enfoques de minería de texto y el análisis cualitativo.

El informe será de relevante para cualquier persona interesada en la evaluación del impacto de la investigación, y del impacto de las universidades en la sociedad. Este informe es parte de un proyecto más amplio dirigido por Digital Science (una división de Macmillan Ciencia y Educación) que trabajan en conjunto con su organización hermana, Nature Publishing Group, el Instituto de Políticas y el Departamento de Humanidades Digitales en el Kings College de Londres.

La recopilación de evidencias de impacto de la investigación: guía de mejores prácticas para la comunidad investigadora

 

capturing-research-evidence1

Tshidzu, B.  [Presentation]  Collecting Research Impact Evidence: best práctice guidance for the research community. London, HEFCE, 2016

Texto completo

Esta guía de orientación publicada el 14 de junio de 2016, trata de orientar al investigador en torno a la recopilación, gestión y uso de fuentes para la compilación de las evidencias del impacto, y es el resultado de una actividad HEFCE Higher Education Funding Council for England organismo encargado de producir un documento de orientación para el sector. 

 

Universidades e institutos de investigación tendrán que ser capaces de demostrar el impacto de su investigación más allá de los círculos académicos, con eficacia y de forma global como parte fundamental de un compromiso más amplio de partes interesadas. Por ello los investigadores necesitan conocer las fuentes de información adecuadas para  compilar las evidencias del impacto de sus actividades de investigación. El impacto se produce a lo largo de todo el ciclo de investigación, no sólo al final de un proyecto. la planificación del impacto y la recolección de material útil como fuente de pruebas de impacto deben ser una parte continua del proceso.