Dedicamos esta entrada a una breve presentación de CoARA («Coalition for Advancing Research Assessment‘), alianza formada por instituciones académicas, organizaciones y expertos para promover y avanzar en la forma en que se evalúa la calidad, el impacto y la relevancia de la investigación. En España podemos citar a Fecyt, Aneca, CSIC y una amplia representación de las universidades (CRUE incluida).
En el año 2020 la Comisión Europea acordó promover una reforma de la evaluación de la investigación. Casi terminado 2021, publica en diciembre el documento «Hacia una reforma del sistema de evaluación de la investigación» en el que se invitaba a las instituciones científicas europeas e internacionales a construir una coalición voluntaria para avanzar conjuntamente hacia un nuevo paradigma. El Consejo Europeo apoyó en junio de 2022 la necesidad de reformas en evaluación, en especial en relación con la ciencia abierta. De todas estas iniciativas surge CoARA.
La idea que subyace es abordar las limitaciones y desafíos actuales en los sistemas de evaluación de la investigación. Se pretende impulsar un cambio hacia enfoques más efectivos, justos y transparentes en la evaluación académica, centrados en prácticas y métricas de evaluación más sofisticadas que vayan más allá de los indicadores tradicionales, como el factor de impacto de las revistas científicas (el indicador «por excelencia» hasta ahora que juzga más el alcance de la revista que el contenido de la investigación publicada en ella).
Las iniciativas promovidas por CoARA tienen aplicaciones potenciales en el ámbito de la evaluación de la investigación:
- Evaluación basada en el mérito: se busca fomentar un sistema de evaluación basado en el mérito y la calidad de la investigación, en lugar de depender únicamente de indicadores cuantitativos. Esto puede permitir una evaluación más justa y equitativa de los investigadores y sus contribuciones.
- Diversificación de indicadores: se promueve la incorporación de una amplia variedad de indicadores para evaluar la investigación, más allá del factor de impacto de las revistas científicas. Esto incluye métricas alternativas, como el alcance y la relevancia de la investigación, su influencia en la sociedad o, por supuesto, la adopción de enfoques más cualitativos.
- Evaluación de impacto social: la alianza asigna importancia al impacto social de la investigación científica. Esto es considerar cómo los resultados de la investigación contribuyen al desarrollo de la sociedad, abordando y resolviendo desafíos (las vacunas contra la COVID-19, por ejemplo), mejorando políticas o beneficiando a comunidades específicas.
- Evaluación multidimensional: se debe avanzar hacia una evaluación multidimensional que tenga en cuenta aspectos como la reproducibilidad, la integridad científica, la colaboración, la comunicación y el liderazgo en el campo de estudio.
- Transparencia y apertura: se aboga por mayor transparencia y más apertura en los procesos de evaluación de la investigación. Esto implica promover la disponibilidad de datos y métodos utilizados en la evaluación, así como la comunicación clara de los criterios y estándares utilizados.
En resumen, CoARA aspira a avanzar en la evaluación de la investigación científica por medio de enfoques más efectivos, justos y transparentes, pretendiendo impulsar un cambio significativo en la forma en que se evalúa la investigación. Sus iniciativas abarcan desde la diversificación de indicadores hasta la evaluación del impacto social y el aumento de la transparencia y la apertura. Al fomentar prácticas de evaluación más sofisticadas y equitativas, tiene el potencial de mejorar la evaluación de la investigación y promover un entorno académico más justo y dinámico. Ojalá sea posible.