La UOC, alineada con las nuevas tendencias internacionales en evaluación científica

Las universidades se enfrentan al reto que supone el aumento de la responsabilidad en la evaluación de su investigación y la carrera académica de sus equipos. Instituciones como la Universitat Oberta de Catalunya (UOC) buscan una forma de evaluar la investigación más justa y responsable, que valore una gama amplia y diversa de criterios y méritos. Con este espíritu, la UOC ya se sumó el pasado año al movimiento europeo para la mejora de la evaluación de la investigación, aglutinado en la Coalición Internacional para el Avance de la Evaluación de la Investigación (CoARA). Además, el primer semestre de 2023 interpeló a su personal docente e investigador (PDI) a fin de entender las capacidades y la preparación internas para adoptar los principios de CoARA, dentro de los procesos de evaluación de la investigación, y para tener en cuenta las opiniones y preocupaciones del equipo investigador antes de empezar a diseñar acciones en concreto. El pistoletazo de salida se dio en 2019 con la aprobación del Plan de conocimiento abierto de la UOC, cuando la universidad firmó la Declaración de San Francisco (DORA), un movimiento internacional para promover una evaluación de la investigación basada en la calidad.

Según valoraciones de Julie Wilson, subdirectora de investigación de los Estudios de Economía y Empresa, investigadora del grupo Nuevas Perspectivas en Turismo y Ocio (NOUTUR) y líder, junto con el vicegerente de Investigación y Transferencia, Ciro Llueca, del grupo de trabajo del Plan de reforma para el avance de la evaluación de la investigación, implicar al personal investigador "ha servido para contrastar la necesidad de modificar nuestra praxis hacia la evaluación de la investigación. El cuestionario que se les hizo llegar otorga importancia a reconocer la diversidad de logros de la investigación, como méritos, perfiles, tareas, carreras y ámbitos temáticos, además de hacer un uso más responsable de las métricas cuantitativas para dar más contexto donde y cuando haga falta".

El análisis, en el que participaron cerca de un centenar de investigadores, "ilustra cómo estamos de capacitados y preparados como institución para evaluar solicitudes, proyectos y procesos de investigación según los principios de DORA y CoARA, sin hablar de la evaluación del profesorado", comenta Julie Wilson. De hecho, más de la mitad de los investigadores participantes ya tienen alguna experiencia con metodologías más amplias —que tienen presente la diversidad de las actividades de investigación y sus prácticas—, a pesar de que también hay muchas necesidades y peticiones de formación al respecto. El análisis también muestra que, en algunos casos, es necesario un mayor conocimiento sobre los procesos de evaluación actuales y, en otros, el impulso de más transparencia en relación con los criterios de algunas convocatorias internas.

El cuestionario al PDI de la UOC sobre el estado de la evaluación de la investigación evidencia que los cambios que tienen que aplicarse requerirán de capacitación y formación específicas para reducir posibles conflictos de intereses, con la incorporación de evaluadores y evaluadoras externos que refuercen la masa crítica en la universidad.

El análisis también indica que ha habido un 'antes' y un 'después' de la firma del acuerdo de CoARA, en diciembre de 2022, con respecto a las percepciones del equipo de la UOC sobre qué haría el resto del sistema. El PDI desconocía qué acciones llevarían a cabo las agencias de calidad universitaria, como la estatal Agencia Nacional de Evaluación de la Calidad y Acreditación (ANECA) y la Agencia para la Calidad del Sistema Universitario de Cataluña (AQU Catalunya), y otras organizaciones como la Conferencia de Rectores de las Universidades Españolas (CRUE). Así, la organización del capítulo español en CoARA, con la participación de la mayoría de las universidades y de las agencias de calidad estatal y catalana, entre otras, y los pasos dados por las agencias evaluadoras ayudan a entender, según los responsables del análisis, que "los cambios se están planteando en todo el sistema y no solo de manera individual".

Cómo ha cambiado la evaluación de la investigación en la UOC

En los trabajos previos al análisis de la evaluación de la investigación con el PDI de la UOC, se solicitó a Llorenç Arguimbau, experto en este ámbito, el análisis de la evaluación de la investigación en las convocatorias internas de la UOC desde la firma de DORA, en 2019. El experto, autor del estudio presentado, que comprende el periodo 2019-2022, remarca que "en cuanto a la metodología para evaluar a las personas candidatas y sus proyectos, el análisis de las bases de las convocatorias evidencia que en la UOC se ha evolucionado hacia una evaluación más cualitativa" y, tal como pide DORA, "los baremos automáticos en función del número de artículos publicados y el factor de impacto de las revistas se han eliminado de los criterios de selección de las convocatorias más recientes".

Arguimbau observa también que los criterios de evaluación de las convocatorias internas han avanzado de forma significativa en aspectos como la calidad científica —actualmente se valoran las solicitudes a partir de elementos como la calidad científico-técnica de los contenidos—, indicadores a escala de publicación —se permite la presentación de citas e indicadores alternativos—, impacto social —se deben explorar respuestas a los retos globales—, contexto, diversidad de resultados, transparencia y apertura —se pide si los resultados están en abierto—.

Plan CoARA 2024-2027 de la UOC

La participación de la UOC en CoARA implica la elaboración de un plan de acción a cuatro años, en el que la universidad tiene que plantear cómo quiere abordar los diez compromisos del acuerdo firmado hace casi un año. El Plan CoARA 2024-2027 de la UOC, patrocinado por Xavier Vilajosana, vicerrector de Investigación, Transferencia y Emprendimiento e investigador líder del grupo Wireless Networks (WINE) del Internet Interdisciplinary Institute (IN3), será presentado antes de finales de año después de un proceso colaborativo para su validación final.

El pasado verano se iniciaron los trabajos del grupo redactor del plan, coordinado por Pastora Martínez-Samper, comisionada para la acción internacional de la UOC, con la participación, además de la propia Julie Wilson, de Víctor García Font, profesor de los Estudios de Informática, Multimedia y Telecomunicación e investigador del grupo K-ryptography and Information Security for Open Networks (KISON) del IN3; de Israel Rodríguez, investigador del IN3 y líder del grupo Care and Preparedness in the Network Society (CareNet), así como de Bego Aguilera, directora de Ciencia Abierta, a la Vicegerencia de Investigación y Transferencia de la UOC. El grupo de trabajo prevé un tiempo de participación con la comunidad académica durante el otoño, en línea con el compromiso de la UOC para favorecer el debate y el consenso, trabajando de forma colectiva para lograr los cambios en la evaluación de la investigación que necesita la comunidad académica.

Participación en CoARA y organismos de este ámbito

La UOC está presente en varios foros nacionales e internacionales que abordan los retos de la evaluación de la investigación. Así, el vicerrector de Investigación, Transferencia y Emprendimiento, Xavier Vilajosana, representa a la UOC en el National Chapter Spain de CoARA, impulsado por la ANECA, la CRUE y el CSIC. Además, Pastora Martínez-Samper fue nombrada miembro de la Comisión de Evaluación y Seguimiento del Procedimiento de Acreditación Estatal de la ANECA y es una de las dos coordinadoras del grupo de trabajo Reforming Academic Career Assessment, seleccionado por CoARA, coordinado por la Asociación Europea de Universidades (EUA) y en el que participan más de treinta organizaciones académicas de toda Europa.

UOC R&I

La investigación e innovación (I+i) de la UOC contribuye a solucionar los retos a los que se enfrentan las sociedades globales del siglo XXI mediante el estudio de la interacción de la tecnología y las ciencias humanas y sociales, con un foco específico en la sociedad red, el aprendizaje en línea y la salud digital.

Los más de 500 investigadores e investigadoras y más de 50 grupos de investigación se articulan en torno a los siete estudios de la UOC, un programa de investigación en aprendizaje en línea (e-learning research) y dos centros de investigación: el Internet Interdisciplinary Institute (IN3) y el eHealth Center (eHC).

La universidad impulsa, también, la innovación en el aprendizaje digital a través del eLearning Innovation Center (eLinC), y la transferencia de conocimiento y el emprendimiento de la comunidad UOC con la plataforma Hubbik.

Los objetivos de la Agenda 2030 para el Desarrollo Sostenible de las Naciones Unidas y el conocimiento abierto son ejes estratégicos de la docencia, la investigación y la innovación de la UOC. Más información: research.uoc.edu.