Upshall, Michael. 2022. “An AI Toolkit for Libraries”. Insights 35: 18. DOI: http://doi.org/10.1629/uksg.592

Ahora que las herramientas de inteligencia artificial (IA) se están utilizando de forma generalizada en las publicaciones académicas, ¿cómo podemos realizar evaluaciones informadas de estas utilidades? Se necesita un conjunto de competencias para evaluar las nuevas herramientas y medir las existentes, que debería permitir a quien encargue o gestione las utilidades de la IA entender qué preguntas hacer, qué parámetros medir y los posibles problemas que hay que evitar al introducir una nueva utilidad. Los conocimientos necesarios no son técnicos. Entre los posibles problemas se encuentran los sesgos en el corpus, un conjunto de entrenamiento deficiente o un mal uso de las métricas para la evaluación. Este artículo ofrece una rápida visión de algunos de los ámbitos en los que se utilizan herramientas de IA y su funcionamiento. A continuación, ofrece una lista de comprobación para la evaluación. El objetivo no es desacreditar la IA, sino hacer un uso eficaz de ella.