CWTS Leiden Ranking Open Edition 2023
| Informació general | Indicadors | Metodologia | Resultats i anàlisi |
Metodologia emprada en l'elaboració del rànquing
El Centre for Science and Technology Studies (CWTS) de la Universitat de Leiden, en col·laboració amb la Curtin Open Knowledge Initiative (COKI), Sesame Open Science, i OurResearch, ha llançat la primera edició de Leiden Ranking Open Edition, basant-se en dades en obert i reproduïbles. En aquesta edició totes les dades, algorismes, etc. es troben compartides en un domini públic, de manera que les institucions poden reproduir els resultats i, segons els autors, podrien també realitzar-hi les seves anàlisis bibliomètriques, sense haver d’adquirir productes com ara SciVal (Scopus-Elsevier) o InCites, d’Elsevier (WoS-Clarivate).
Aquest nou sistema és una experiència pilot per comprovar el nivell de qualitat i cobertura de portals com OpenAlex a l’hora de realitzar aquest tipus d’anàlisis. Les dades d’OpenAlex es basen en metadades en obert de les publicacions, si bé això no implica que tot el conjunt de publicacions que inclou sigui d’accés obert, és a dir, que el text estigui també íntegrament disponible. D’aquí la diferència entre el total de publicacions analitzades i el total de publicacions en obert a l’apartat de resultats.
Els resultats es faciliten tant agrupats, com desagregats en cinc grans camps: Ciències de la Salut i Biomèdiques; Ciències de la Vida i de la Terra; Matemàtiques i Ciències de la Computació; Enginyeria i Ciències Físiques; i Ciències Socials i Humanitats. Cada publicació pot pertànyer a un o més camps; quan pertany a més d’un, els editors fraccionen la puntuació de manera proporcional. Així mateix, l’assignació al camp es realitza a nivell de publicació i no de revista, i es fa a través d’un sèrie d’algorismes on cada publicació a OpenAlex es reparteix entre 4.500 micronivells inicials, per seguir després un procés d’agregacions successives fins arribar als cinc camps analitzats.
Classificada en una o altra de les llistes, el rànquing inclou 1411 universitats d’arreu del món, les mateixes de fet que es van considerar en la darrera edició del Leiden Ranking tradicional, publicada el mes de juny de 2023.
Com en l’anterior variant, el Leiden Ranking Open Edition avalua una bateria d’indicadors centrats en la producció científica, agrupats ara en tres grans àmbits enlloc de quatre: impacte científic, col·laboració, i open access. En aquesta ocasió, l’àmbit de gènere no ha estat considerat pels editors. Els editors segueixen sense calcular cap indicador de síntesi, de manera que existeixen novament tantes llistes com indicadors. No obstant això, l’indicador P (número de publicacions), és el que apareix per defecte a l’aplicació quan s’accedeix a cada àmbit.
A més d’OpenAlex, el rànquing utilitza també dades d’un registre d’organització creat i mantingut pel propi CWTS; en aquest cas, les dades les obtenen en part del Research Organization Registry ROR. Així mateix, a l’hora de considerar quins són els centres de recerca -i centres sanitaris, si fos el cas-, vinculats a una organització, tenen en compte la informació inclosa al perfil de la institució a ROR. En el cas de la UPC, el perfil a ROR és per ara parcial i inexacte, aspecte que deu haver alterat l’adequació dels resultats. Pel que fa a aquest punt, es requereix la col·laboració del Servei de Biblioteques, Publicacions i Arxius de la UPC, de cara a revisar i actualitzar la informació vigent.
D’altra banda, en les edicions tradicionals basades en les publicacions indexades a revistes de la Web Of Science, el web del rànquing publicava un excel amb informació sobre quines categories de revistes es consideravaen en cada camp. A partir d’aquesta informació es podia comprovar que el camp de Matemàtiques i Ciències de la Computació, per exemple, a més de les categories que es dedueixen del propi nom, n’incloïa també altres com Sistemes d’Automatització i Control, Enginyeria Elèctrica i Electrònica, Enginyeria Industrial, Robòtica o Ciència i Tecnologia del Transport. En aquesta nova edició, basada en dades a Open Alex, la informació sobre els micronivells i els camps als quals s’assignen es publica a través de l’eina interactiva VOSviewer.
Per acabar aquest apartat, cal tenir present que els editors no consideren totes les publicacions que apareixen a OpenAlex sinó únicament aquelles que consideren “principals” i que, entre altres, són publicacions escrites en anglès, no s’han retractat, i es publiquen en revistes considerades també com a “principals”. En aquest cas, es tracta de revistes d’abast internacional i amb un número prou elevat de referències per part de revistes del seu mateix nivell.
Aquest nou sistema és una experiència pilot per comprovar el nivell de qualitat i cobertura de portals com OpenAlex a l’hora de realitzar aquest tipus d’anàlisis. Les dades d’OpenAlex es basen en metadades en obert de les publicacions, si bé això no implica que tot el conjunt de publicacions que inclou sigui d’accés obert, és a dir, que el text estigui també íntegrament disponible. D’aquí la diferència entre el total de publicacions analitzades i el total de publicacions en obert a l’apartat de resultats.
Els resultats es faciliten tant agrupats, com desagregats en cinc grans camps: Ciències de la Salut i Biomèdiques; Ciències de la Vida i de la Terra; Matemàtiques i Ciències de la Computació; Enginyeria i Ciències Físiques; i Ciències Socials i Humanitats. Cada publicació pot pertànyer a un o més camps; quan pertany a més d’un, els editors fraccionen la puntuació de manera proporcional. Així mateix, l’assignació al camp es realitza a nivell de publicació i no de revista, i es fa a través d’un sèrie d’algorismes on cada publicació a OpenAlex es reparteix entre 4.500 micronivells inicials, per seguir després un procés d’agregacions successives fins arribar als cinc camps analitzats.
Classificada en una o altra de les llistes, el rànquing inclou 1411 universitats d’arreu del món, les mateixes de fet que es van considerar en la darrera edició del Leiden Ranking tradicional, publicada el mes de juny de 2023.
Com en l’anterior variant, el Leiden Ranking Open Edition avalua una bateria d’indicadors centrats en la producció científica, agrupats ara en tres grans àmbits enlloc de quatre: impacte científic, col·laboració, i open access. En aquesta ocasió, l’àmbit de gènere no ha estat considerat pels editors. Els editors segueixen sense calcular cap indicador de síntesi, de manera que existeixen novament tantes llistes com indicadors. No obstant això, l’indicador P (número de publicacions), és el que apareix per defecte a l’aplicació quan s’accedeix a cada àmbit.
A més d’OpenAlex, el rànquing utilitza també dades d’un registre d’organització creat i mantingut pel propi CWTS; en aquest cas, les dades les obtenen en part del Research Organization Registry ROR. Així mateix, a l’hora de considerar quins són els centres de recerca -i centres sanitaris, si fos el cas-, vinculats a una organització, tenen en compte la informació inclosa al perfil de la institució a ROR. En el cas de la UPC, el perfil a ROR és per ara parcial i inexacte, aspecte que deu haver alterat l’adequació dels resultats. Pel que fa a aquest punt, es requereix la col·laboració del Servei de Biblioteques, Publicacions i Arxius de la UPC, de cara a revisar i actualitzar la informació vigent.
D’altra banda, en les edicions tradicionals basades en les publicacions indexades a revistes de la Web Of Science, el web del rànquing publicava un excel amb informació sobre quines categories de revistes es consideravaen en cada camp. A partir d’aquesta informació es podia comprovar que el camp de Matemàtiques i Ciències de la Computació, per exemple, a més de les categories que es dedueixen del propi nom, n’incloïa també altres com Sistemes d’Automatització i Control, Enginyeria Elèctrica i Electrònica, Enginyeria Industrial, Robòtica o Ciència i Tecnologia del Transport. En aquesta nova edició, basada en dades a Open Alex, la informació sobre els micronivells i els camps als quals s’assignen es publica a través de l’eina interactiva VOSviewer.
Per acabar aquest apartat, cal tenir present que els editors no consideren totes les publicacions que apareixen a OpenAlex sinó únicament aquelles que consideren “principals” i que, entre altres, són publicacions escrites en anglès, no s’han retractat, i es publiquen en revistes considerades també com a “principals”. En aquest cas, es tracta de revistes d’abast internacional i amb un número prou elevat de referències per part de revistes del seu mateix nivell.