Tal y como hemos comentado en diferentes artículos en este blog, los rankings universitarios se han popularizado en los últimos años, recogiéndose sus resultados en los diferentes medios de comunicación. Además se han utilizado por diferentes gobiernos como un recurso para cambiar o reorganizar su sistema universitario y por las universidades para intentar atraer más y mejores estudiantes y profesionales y mejorar su financiación además de su prestigio. En todo caso y dado que “los rankings han llegado para quedarse” no podemos ignorarlos, pero debemos conocerlos y utilizarlos con la debida prudencia.

Uno de los rankings más conocidos es el CWTS Leiden Ranking, cuya edición para 2014 se ha publicado el 30 de abril. Este ranking tiene en cuenta una de las misiones de las universidades: la investigación. Así el ranking de Leiden mide “el rendimiento científico de 750 grandes universidades mundiales (500 en la edición de 2013)”, para lo cual utiliza “un conjunto de indicadores bibliométricos sofisticados con el objetivo de proporcionar medidas muy precisas del impacto científico de las universidades, así como la implicación de las universidades en la colaboración científica”.

Aunque lo más importante no es el titular, se puede decir que, desde el punto de vista del impacto de la investigación, el ranking sigue dominado por las universidades de Estados Unidos, aunque con una importante presencia de universidades europeas, destacando el avance de China y la mayor presencia de universidades españolas. En todo caso, invito a los lectores, gestores universitarios y “reformadores” de sistemas universitarios a que conozcan más el ranking y “naveguen” por sus páginas e indicadores.

METODOLOGÍA

Según sus autores, el ranking de Leiden ofrece principalmente dos ventajas sobre otros rankings: indicadores más avanzados sobre colaboración e impacto científico y metodología más transparente. Y, resaltan los autores, no se basa en datos subjetivos apoyados en encuestas de reputación o en los datos aportados por las universidades.

Tal y como se ha indicado, el ranking incluye las 750 universidades que han publicado artículos en revistas científicas internacionales indexadas en Web of Science durante el período 2009–2012. En artículos con autores de más de una institución, la participación de cada universidad en un artículo se obtenido teniendo en cuenta el número de autores y su universidad.

En la edición de 2013 ya se habían incluido mejoras y nuevas características con respecto a la edición anterior, especialmente en lo que se refería a la metodología para obtener datos así como la adición de cinco campos o áreas científicas (que este año se han desglosado en siete). Además se incorporó un nuevo indicador que mide la relación entre la universidad y las empresas. También permitía la posibilidad de excluir publicaciones en determinados tipos de revistas (revistas no internacionales, revistas profesionales y revistas de difusión científica), en lo que se ha avanzado en 2014.

Por tanto, en la edición de 2014 se ha segido avanzando en las mejoras del ranking:

  • Mayor número de universidades, pasando de 500 a 750, según se ha indicado.
  • Se ha mejorado la metodología de normalización para los diferentes campos científicos analizados.
  • Se han establecido, además del ranking general, siete campos científicos, en lugar de cinco de la edición anterior.
  • Los campos establecidos se han definido a nivel de publicación individual, no a nivel de revista científica.
  • Consideración solamente de “core journals”.

De este modo, solamente se han considerado artículos publicados en lo que los autores denominan “core journals”, es decir, aquellas revistas científicas que cumplen dos condiciones:

  • Se publica en inglés y tienen ámbito internacional.
  • Tiene un número suficiente de referencias a otros “core journals” en la base de datos Web of Science. En este sentido, los autores indican que muchas revistas científicas de humanidades no cumplen estan condición, ni tampoco otras como los revistas de divulgación científica o revistas orientadas a profesionales.

Como se ha indicado, los cinco campos de producción científica de 2013 se han separado en 7. En la edición de 2013 se incluían los siguientes campos científicos:

  • Biomédica y ciencias de la salud.
  • Ciencias de la vida y la tierra.
  • Matemáticas e informática.
  • Ciencias naturales e ingeniería.
  • Humanidades y ciencias sociales.

Estableciéndose en 2014 los siguientes:

  • Ciencias cognitivas
  • Ciencias de la tierra y ambientales.
  • Ciencias de la vida.
  • Matemáticas, informática e ingeniería.
  • Medicina.
  • Ciencias naturales.
  • Ciencias Sociales.

Este cambio, como es evidente, dificulta la comparación con ediciones anteriores.

Indicadores

El  CWTS Leiden Ranking 2014 toma como referencia las publicaciones recogidas en la base de datos Thomson Reuters’ Web of Science (Science Citation Index Expanded, Social Sciences Citation Index, and Arts & Humanities Citation Index) en el período 2009-2012. Solamente se han tenido en cuenta las publicaciones de tipo artículo (article) o revisión (review), no considerándose los libros o publicaciones en conferencias o revistas científicas no indexadas en esta base de datos.

El Ranking utiliza indicadores de productividad global, de impacto científico e indicadores de colaboración.

Indicadores de productividad científica (dependientes del tamaño de la universidad):

Incluye la productividad científica, que se mide utilizando el indicador Number of publications (P) y se calcula contando el número total de publicaciones de una universidad, además del número total de citas (TCS) y el número total de citas normalizado (TNCS).

Indicadores de impacto

  • MCS (mean citation score). número medio de veces que se citan las publicaciones de una universidad;
  • MNCS (mean normalized citation score). número medio de veces que se citan las publicaciones de una universidad normalizadas por campo y año de publicación.  Así, un valor MNCS de dos significa que las publicaciones de una Universidad se han citado dos veces de media en el mundo.
  • PP(top 10%) (proportion of top 10% publications). proporción de publicaciones de una universidad que en comparación con otras publicaciones en el mismo campo y el mismo año se encuentran en el top 10% de las citadas con más frecuencia.

Se ha tomado como referencia para la obtención de datos hasta el final del año 2013 y se excluyen auto-citas. Los autores consideran que el indicador PP(top 10%) es más estable que el indicador MNCS y por ello consideran que éste, PP(top 10%), es el indicador de impacto más importante del Ranking y es para el que se mostrarán los resultados en este artículo.

Indicadores de colaboración

  • PP(collab) (proportion of interinstitutional collaborative publications): proporción de artículos       que una universidad ha publicado en colaboración con una o más organizaciónes;
  • PP(int collab) (proportion of international collaborative publications. proporción de artículos que una universidad ha publicado en colaboración con dos o más países;
  • PP(UI collab) (proportion of collaborative publications with industry). Este indicador se introdujo en 2013. Mide la proporcion de publicaciones que una Universidad ha publicado en colaboración con una o más empresas.

En la edición de 2013 se incorporó el indicador:

  • MGCD (mean geographical collaboration distance): distancia geográfica media de las organizaciones que han colaborado en una publicación  según las direcciones recogidas en el listado de direcciones de la publicación.

Este indicador se ha sustituido este año por otros dos:

  • PP(<100 km) (proportion of short distance collaborative publications). Proporción de publicaciones de una Universidad con colaboraciones con otras instituciones que están a una distancia menor de 100 Km. Para el cálculo de esta distancia se toma la mayor entre las dos direcciones recogidas en el listado de direcciones de la publicación.
  • PP(>1000 km) (proportion of long distance collaborative publications). Proporción de publicaciones de una universidad con colaboraciones con otras instituciones que están a una distancia mayor de 1000 Km.

Indicadores dependientes/independientes del tamaño de la Universidad

El ranking utiliza por defecto indicadores independientes del tamaño de la Universidad (estadísticas por publicación), de modo que permite comparaciones entre universidades pequeñas y otras mayores. También permite mostrar indicadores dependientes del tamaño de la Universidad, que proporcionan indicadores globales de la Universidad (por ejemplo productividad total o número total de citas) y que son menos útiles para poder comparar.

RESULTADOS

A continuación se recogen algunos resultados utilizando el indicador de impacto científico proportion top 10% publications (PPtop 10%)), considerado el índice de impacto más importante por los autores.

En el top 10 salta al primer lugar la Universidad Rockefeller y desaparece la Univ de Rice, siendo el resto de universidades las mismas:

General
2014 2013
Rockefeller Univ MIT
MIT Univ Calif – Santa Barbara
Harvard Univ Stanford Univ
Univ Calif – Berkeley Princeton Univ
Stanford Univ Harvard Univ
Caltech Rice Univ
Princeton Univ Univ Calif – Berkeley
Univ Calif – Santa Barbara Caltech
Univ Calif – San Francisco Univ Calif – San Francisco
Yale Univ Yale Univ

El número de universidades por países es el siguiente:

País Número
Estados Unidos 166
China 83
Alemania 47
Reino Unido 45
Japón 38
Italia 33
Canadá 28
España 28
Corea del Sur 26
Francia 25
Australia 23
India 16
Taiwán 16
Brasil 13
Países Bajos 13
Irán 12
Turquía 11
Suecia 10
Austria 8
Polonia 8
Bélgica 7
Finlandia 7
Israel 7
Suiza 7
Grecia 6
Portugal 6
Dinamarca 5
Hungría 5
Nueva Zelanda 5
Sudáfrica 5
Egipto 4
Irlanda 4
Malasia 4
Noriega 4
Argentina 3
República Checa 3
Arabia Saudí 3
Tailandia 3
Chile 2
Singapur 2
Croacia 1
Estonia 1
Líbano 1
México 1
Rusia 1
Serbia 1
Eslovaquia 1
Eslovenia 1
Túnez 1

Destacan especialmente Estados Unidos y China, seguidas de Alemania, Reino Unido, Japón, Italia, Canadá, España, Corea del Sur, Francia y Australia.

España con 28 universidades sube 13 con respecto a 2013 para este indicador, aunque hay que recordar que este año se han incluido 250 universidades más. Si se considerasen solamente las primeras 500 universidades al igual que en 2013, España pasaría a tener 18 universidades en el ranking, es decir, 3 más que el año pasado.

Puesto Universidad
180 Univ Rovira & Virgili
216 Univ Barcelona
383 Univ Politècnica València
394 Univ Autonoma Madrid
395 Univ Córdoba
397 Univ Autonoma Barcelona
400 Univ Carlos III Madrid
401 Univ Vigo
428 Univ Valencia
431 Univ Málaga
441 Univ Santiago de Compostela
448 Univ Granada
455 Univ Navarra
463 Univ Zaragoza
473 Univ Alicante
490 Univ Politècnica Catalunya
493 Univ Sevilla
496 Univ Complutense
502 Univ Cantabria
530 Univ Politécnica Madrid
534 Univ País Vasco
552 Univ Salamanca
555 Univ La Laguna
563 Univ Murcia
589 Univ Oviedo
613 Univ Castilla-La Mancha
644 Univ Extremadura
653 Univ Valladolid

Las universidades españolas que aparecieron en este indicador en 2013 fueron: Univ Barcelona (primera española en el puesto 259), Univ Politècnica València, Univ Santiago de Compostela, Univ Autónoma Barcelona, Univ Valencia, Univ Autónoma Madrid, Univ Zaragoza, Univ Granada, Univ Politècnica Catalunya, Univ Sevilla, Univ Complutense, Univ Murcia, Univ Oviedo, Univ País Vasco y Univ Politécnica Madrid.

Dado que ha habido cambios en los campos científicos, no es posible establecer una comparación directa entre 2014 y 2013. En todo caso, los resultados para 2014 y para este indicador son los siguientes para cada campo:

Ciencias cognitivas

El top 10 está formado por instituciones de Estados Unidos y Reino Unido: Caltech, Rockefeller Univ, MIT, Harvard Univ, Univ Cambridge, Stanford Univ, Univ Oxford, Princeton Univ, Univ Calif – San Francisco y Univ Coll London

El ranking por países en el top 100 el siguiente:

País Número
Estados Unidos 54
Reino Unido 16
Alemania 7
Francia 4
Países Bajos 4
Suiza 4
Canadá 3
Australia 1
Bélgica 1
China 1
Dinamarca 1
Irlanda 1
Italia 1
España 1
Suecia 1

Las universidades españolas son las siguientes:

Puesto Universidad
98 Univ Barcelona
314 Univ Autónoma Barcelona
332 Univ Santiago de Compostela
335 Univ Navarra
405 Univ Valencia
415 Univ Granada
428 Univ Sevilla
429 Univ Murcia
437 Univ Oviedo
457 Univ Autónoma Madrid
460 Univ País Vasco
486 Univ Complutense
489 Univ Málaga

Ciencias de la tierra y ambientales.

El top 10 está formado por instituciones de Estados Unidos: Harvard Univ, Yale Univ, Princeton Univ, Caltech, Univ Calif – Santa Cruz, Univ Chicago, Univ Calif – Berkeley, Columbia Univ, Dartmouth Coll y Stanford Univ.

El ranking por países en el top 100 el siguiente:

País Número
Estados Unidos 47
Reino Unido 15
Australia 5
Alemania 5
Suiza 4
China 3
Francia 3
Países Bajos 3
Canadá 2
Italia 2
Singapur 2
Suecia 2
Bélgica 1
Irán 1
Japón 1
Malasia 1
Corea del Sur 1
España 1
Turquía 1

Las universidades españolas son las siguientes:

Puesto Universidad
57 Univ Málaga
103 Univ Rovira & Virgili
157 Univ Córdoba
174 Univ Santiago de Compostela
187 Univ Barcelona
204 Univ Cantabria
234 Univ Valencia
247 Univ Murcia
267 Univ Complutense
298 Univ Sevilla
307 Univ Zaragoza
310 Univ Granada
327 Univ Politècnica València
329 Univ Politècnica Catalunya
348 Univ Vigo
353 Univ Salamanca
372 Univ Autónoma Madrid
390 Univ Alicante
394 Univ Oviedo
396 Univ Autónoma Barcelona
415 Univ Politécnica Madrid
424 Univ Extremadura
436 Univ País Vasco
483 Univ Valladolid
510 Univ Castilla-La Mancha

Ciencias de la vida.

El top 10 está formado por instituciones de Estados Unidos: MIT, Rockefeller Univ, Harvard Univ, Stanford Univ, Univ Calif – San Francisco, Univ Calif – Berkeley, Caltech, Univ Texas – Southwestern Med Ctr, Princeton Univ y Univ Massachusetts Med Sch.

El ranking por países en el top 100 el siguiente:

País Número
Estados Unidos 51
Reino Unido 21
Australia 6
Francia 6
Países Bajos 6
Suiza 6
Canadá 2
Irlanda 1
Israel 1

Las universidades españolas son las siguientes:

Puesto Universidad
251 Univ Barcelona
264 Univ Valencia
295 Univ Vigo
317 Univ Autónoma Barcelona
324 Univ Rovira & Virgili
328 Univ Politècnica València
349 Univ Málaga
363 Univ Oviedo
374 Univ Navarra
379 Univ Granada
386 Univ Salamanca
392 Univ Cantabria
423 Univ Zaragoza
430 Univ Complutense
434 Univ Córdoba
438 Univ Santiago de Compostela
443 Univ Autónoma Madrid
451 Univ País Vasco
454 Univ Alicante
457 Univ Sevilla
468 Univ Politécnica Madrid
474 Univ Murcia
488 Univ Valladolid
521 Univ Extremadura
598 Univ La Laguna
602 Univ Castilla-La Mancha
681 Univ Politècnica Catalunya

Matemáticas, informática e ingeniería.

El top 10 está formado por instituciones de Estados Unidos y una de Países Bajos: Princeton Univ, Caltech, Univ Penn, Harvard Univ, Stanford Univ, Northwestern Univ, Leiden Univ, Univ Chicago, Univ Calif – Berkeley y Rice Univ.

El ranking por países en el top 100 el siguiente:

País Número
Estados Unidos 44
Alemania 12
China 8
Australia 6
Reino Unido 6
Países Bajos 4
Francia 3
Suiza 3
Italia 2
Malasia 2
España 2
Austria 1
Bélgica 1
Canadá 1
India 1
Irlanda 1
Arabia Saudí 1
Suecia 1
Turquía 1

Las universidades españolas son las siguientes:

Puesto Universidad
16 Univ Rovira & Virgili
87 Univ Barcelona
130 Univ Santiago de Compostela
135 Univ Córdoba
142 Univ Granada
178 Univ Murcia
215 Univ Castilla-La Mancha
227 Univ Carlos III Madrid
248 Univ Autónoma Madrid
339 Univ Politècnica Catalunya
372 Univ Málaga
374 Univ Sevilla
375 Univ Zaragoza
381 Univ La Laguna
387 Univ Politécnica Madrid
396 Univ Complutense
423 Univ Valladolid
459 Univ Politècnica València
494 Univ Cantabria
501 Univ Vigo
510 Univ Autónoma Barcelona
528 Univ País Vasco
540 Univ Oviedo
543 Univ Valencia
570 Univ Extremadura
577 Univ Salamanca
599 Univ Alicante

El top 10 está formado por seis instituciones de Estados Unidos, tres del Reino Unido y una universidad de Australia: Rockefeller Univ, MIT, Caltech, Univ Technol Sydney, Harvard Univ, Univ Oxford, Univ Cambridge, Univ Calif – Berkeley, Univ Calif – San Francisco y Queen Mary – Univ London.

El ranking por países en el top 100 el siguiente:

País Número
Estados Unidos 45
Reino Unido 25
Francia 6
Países Bajos 5
Suiza 5
Australia 3
Canadá 3
Austria 1
Bélgica 1
Dinamarca 1
Alemania 1
Irlanda 1
Israel 1
Sudáfrica 1
Suecia 1

Las universidades españolas son las siguientes:

Puesto Universidad
133 Univ Barcelona
243 Univ Autónoma Barcelona
275 Univ País Vasco
294 Univ Autónoma Madrid
296 Univ Navarra
323 Univ Córdoba
363 Univ Complutense
390 Univ Cantabria
392 Univ Valencia
400 Univ Rovira & Virgili
409 Univ Sevilla
412 Univ Salamanca
428 Univ Zaragoza
441 Univ Málaga
443 Univ Extremadura
453 Univ Granada
455 Univ Santiago de Compostela
504 Univ Murcia
507 Univ Castilla-La Mancha
539 Univ Oviedo
586 Univ Valladolid
599 Univ Politècnica València

Ciencias naturales.

El top 10 está formado por instituciones de Estados Unidos: Boston Coll, Stanford Univ, Harvard Univ, Univ Calif – Santa Barbara, MIT, Univ Calif – Berkeley, Rice Univ, Northwestern Univ, Yale Univ y Univ Penn.

El ranking por países en el top 100 el siguiente:

País Número
Estados Unidos 61
Países Bajos 7
Reino Unido 7
Alemania 6
Suiza 4
Canadá 3
Dinamarca 2
Israel 2
Singapur 2
Australia 1
Austria 1
China 1
Grecia 1
Irlanda 1
Italia 1

Las universidades españolas son las siguientes:

Puesto Universidad
158 Univ Politècnica València
222 Univ Rovira & Virgili
228 Univ Autónoma Madrid
256 Univ Alicante
265 Univ Vigo
286 Univ Barcelona
329 Univ Autónoma Barcelona
344 Univ Valencia
370 Univ Complutense
376 Univ Granada
395 Univ Santiago de Compostela
396 Univ Zaragoza
409 Univ Málaga
419 Univ País Vasco
462 Univ La Laguna
466 Univ Sevilla
502 Univ Salamanca
511 Univ Castilla-La Mancha
518 Univ Politécnica Madrid
538 Univ Córdoba
546 Univ Oviedo
551 Univ Cantabria
584 Univ Valladolid
585 Univ Murcia
599 Univ Politècnica Catalunya
601 Univ Extremadura
685 Univ Carlos III Madrid

Ciencias Sociales.

El top 10 está formado por instituciones de Estados Unidos: Harvard Univ, Princeton Univ, MIT, Univ Chicago, Stanford Univ, Yale Univ, Northwestern Univ, Univ Calif – San Diego, Dartmouth Coll y Duke Univ.

El ranking por países en el top 100 el siguiente:

País Número
Estados Unidos 60
Reino Unido 13
Países Bajos 5
Suiza 5
Alemania 4
China 3
Dinamarca 3
Cadaná 2
Bélgica 1
Finlandia 1
Noruega 1
Suecia 1
Taiwán 1

Las universidades españolas son las siguientes:

Puesto Universidad
147 Univ Carlos III Madrid
225 Univ Alicante
238 Univ Zaragoza
242 Univ Autónoma Barcelona
259 Univ Sevilla
274 Univ Politècnica Catalunya
276 Univ Barcelona
305 Univ Autónoma Madrid
345 Univ Salamanca
348 Univ Santiago de Compostela
349 Univ Cantabria
352 Univ Valencia
361 Univ Politècnica València
366 Univ Granada
388 Univ Oviedo
396 Univ Vigo
398 Univ Murcia
405 Univ País Vasco
409 Univ Politécnica Madrid
413 Univ Complutense
418 Univ Castilla-La Mancha

En la página web del ranking se pueden consultar los resultados para otros indicadores de impacto científica así como de colaboración, para los siete campos científicos. Por ello invito a los lectores de este artículo a revisar en detalle los resultados, así como a los responsables de las universidades a que analicen aquellos indicadores que consideren que pueden ser más relevantes para su estrategia.

Tomás Gómez 30/04/2014

BIBLIOGRAFÍA Y MÁS INFORMACIÓN

CWTS Leiden Ranking.

Resultados del CWTS Leiden Ranking 2014

CWTS Leiden Ranking: recogida de datos.

CWTS Leiden Ranking: indicadores.

CWTS Leiden Ranking: recursos adicionales.

CWTS Leiden Ranking 2013

Leideng Ranking 2011/2012

The World reputation rankings 2014: ranking de reputación universitaria

Times Higher Education World University Rankings 2013-2014

Ranking THE de las 100 mejores universidades con menos de 50 años (edición 2013)

QS World University Ranking 2013/2014

Ranking QS de las 50 mejores universidades del mundo con menos de 50 años (edición 2014)

Rankings y reputación universitaria: Jornadas de la AUGAC, Universidad de La Rioja (primera parte)

Rankings y reputación universitaria: Jornadas de la AUGAC, Universidad de La Rioja (segunda parte)

Rankings y reputación universitaria: Jornadas de la AUGAC, Universidad de La Rioja (tercera parte)

El valor de los rankings universitarios (primera parte)

El valor de los rankings universitarios (segunda parte)