Рейтинги университетов. Что это? Зачем они? Какие и сколько?

Ирина Разумова
Консорциум НЭИКОН
[email protected]
Science Online в Крыму, июнь 2009
Международные и национальные
рейтинги университетов как механизм оценки научной деятельности:
альтернатива или дополнение
к индексам цитирования?

Почему вдруг? Чиновники Рособразования заговорили о рейтингах в 2008 г. еще ничего не понимая ни в рейтингах, ни в индексах цитирования
Письмо о ФОТ и индикаторе, октябрь 2008 г.
В связи с постановлением Правительства Российской Федерации
от 5 августа 2008 г. № 583 и требованиями Федерального агентства по образованию по порядку и выполнения работ по распределению централизованной части фонда оплаты труда (далее - ­ФОТ), все университеты должны представлять информацию по следующему индикатору
http://www.kpmo.ru/kpmo/info/nsotdocs.html

Зачем? Чтобы делить деньги. Бегущая строка на сайте...
Внимание!!! Всем федеральным учреждениям
необходимо заполнить данные, необходимые для
распределения Рособразованием централизованной части
ФОТ до 1 декабря 2008 г

появляется упоминание о рейтингах…
«При расчёте индексов цитирования необходимо брать данные о международных индексах цитирования (Шанхайский, Таймс). При их наличии.»

2009-2010 гг. Интерес к рейтингам в России растет
Февраль 2009. Агентство Рейтор выстраивает свои рейтинг университетов при поддержке МГУ
Декабрь 2009. Агентство Интерфакс выстаивает Национальный рейтинг российских университетов по заказу Монобрнауки
10 марта 2010 г в МГУ проходит заседание Российского союза ректоров (РСР)

Определение. Что такое рейтинг?
Рейтинги университетов в ВО – это перечень университетов в порядке, определенном некоторой комбинацией факторов. Рейтинг может быть основан на субъективной оценке «качества», на некоторой комбинации данных статистики, на результатов опросов преподавателей, ученых, студентов, будущих студентов и пр.
Рейтинг – это упорядоченный список, построенный по определенным принципам

Итак, мы знаем, что такое рейтинги. А зачем они?
«Равнение на рейтинг». Иван Стерлигов,
«Наука и технологии России — STRF.ru»
http://www.strf.ru/organization.aspx?CatalogId=221&d_no=20373
с рейтингами во всем мире связывается понятие университета «мирового уровня»
университеты все чаще не только действуют с оглядкой на рейтинги, но и открыто заявляют о своем желании попасть в различные top-50, top-10.
на рейтинги ориентируется все больше абитуриентов и инвесторов
американский независимый центр IHEP (www.ihep.org) выпустил
краткий отчет о влиянии рейтингов на управление университетами.

Краткие выводы из отчета IHEP
на рейтинги ориентируется вузовское начальство при комплектовании штата (число нобелевских лауреатов, число full profs)
создаются специальные подразделения для улучшения места в иерархии
в университетах США и Канады для топ-менеджеров предусмотрены бонусы в $10—20 тыс. за движение вверх по списку.

Краткие выводы из отчета IHEP
приветствуется сотрудничество только с университетами равного или более высокого статуса
ученых просят публиковаться в высокоцитируемых журналах. Причина все та же - рейтинги
профессоров просят четко и единообразно указывать аффилиацию.
авторов наиболее цитируемых статей регулярно премируют.
рейтинги - одна из причин курса на интернационализацию образования в Германии и Японии. Увеличение доли англоязычных программ и иностранных студентов.

Рейтингов очень много… И не только университетских
Если говорить только об университетских
рейтингах. Возьмем данные из
Википедии. http://en.wikipedia.org/wiki/
Международные
Национальные
Региональные

Наиболее престижные рейтинги
UK: Times, Guardian и The Independent ,
В США огромное значение имеет перечень US News and World Report
КНР «Шанхайский рейтинг»
Во Франции «Профессиональный рейтинг университетов» формирует Ecole des Mines
Германия, Бельгия, Австралия…

Wikipedia: College and University Rankings
http://en.wikipedia.org/wiki/College_and_university_rankings

Вернемся к тексту первоисточника
При расчёте индексов цитирования необходимо брать данные о международных индексах цитирования (Шанхайский, Таймс). При их наличии.

Международные рейтинги университетов. 1. Таймс
Times Higher Education Supplement (THES)
Thomson Reuters c 2010
QS World University Rankings (QS-Quacquarelli Symonds)-от этой компании c 2010 отказались,

Рейтинг Times Higher Education Supplement (THES) – 6 показателей
число упоминаний вуза академическим сообществом (Peer Review, 40%);
число упоминаний вуза профессиональными рекрутерами (Recruitment Review, 10%);
процент иностранных студентов вуза (International Students, 5%);
процент иностранных преподавателей вуза (International Faculty, 5%);
соотношение штата ППС и студентов вуза (Faculty / Student, 20%);
соотношение количества цитат и штата ППС (Citation/Faculty, 20%).

THES 2009
http://www.topuniversities.com/university-rankings/world-university-rankings/2009/results

Top 100 2009 THES
32 – США
18 – Великобритания
8 – Австралия
6 - Япония
4 - Германия
4 – Канада
4 – Нидерланды
3 – Гонг Конг
По 2 – Китай, Дания, Франция, Сингапур
Россия – 0!!!!!!!

THES 2009
1 HARVARD University US
2 University of CAMBRIDGE UK
3 YALE University US
4 University College London UK
5= IMPERIAL College London UK
5= University of OXFORD UK

Top 300 Universities (в пяти предметных областях):
Arts and Humanities
Life Sciences & Biomedicine
Natural Sciences
Social Sciences
Technologies

Российские университеты в THES 2009
МГУ – 155 – внесена поправка и теперь 101
СПбГУ –168
Новосибирский ГУ - 312
Томский ГУ - Top 500
Казанский ГУ - Top 600
ВШЭ - Top 600

Международные рейтинги университетов. 2. «Шанхайский»
Academic Ranking of World Universities, ARWU,
Shanghai Jiao Tong University, 2003.
www.arwu.org

Шанхайский рейтинг университетов – ARWU
Число дипломированных выпускников ВУЗа, получивших Нобелевскую премию (физика, химия, медицина и экономика ) или медаль Филдса (математика) (Alumni,10 %)
общее число сотрудников, получивших Нобелевскую премию (физика, химия, медицина и экономика ) или медаль Филдса (математика) (Award, 20%);
число исследователей, попавших в число часто цитируемых авторов по 21 области наук (HiCi, 20%);
Все данные берутся за все годы с разным весом

Шанхайский рейтинг университетов – ARWU
Число статей, опубликованных авторами университета в журналах Nature и Science за последние пять лет (N&S, 20%);
Общее число статей, опубликованных в журналах Web of Science (SCIE, SSCI и AHCI) в предыдущем году (SCI, 20%);
результат деления суммы баллов по предыдущим пяти показателям на число эквивалентов полной ставки (FTE) академического персонала (Size, 10%).

Откуда берутся данные
Nobel Prize winners. http://nobelprize.org/
Fields Medals. http://www.mathunion.org/medals/
Highly cited researchers. http://www.isihighlycited.com
Articles published in Nature and Science. http://www.isiknowledge.com
Articles indexed in Science Citation Index-Expanded and Social Science Citation Index. http://www.isiknowledge.com.
FTE. Данные национальных агентств: National Ministry of Education, National Bureau of Statistics, National Association of Universities and Colleges, National Rector's Conference.

Top 100 2009 ARWU
55 – США
11 – Великобритания
5 - Япония
5 - Германия
4 – Канада
3 – Франция, Австралия, Щвеция, Швейцария
По 2 – Дания, Нидерланды
Россия – 1

ARWU 2009
1 HARVARD University US
2 Stanford University US
3 University of California, Berkeley US
4 Massachusetts Institute of Technology (MIT) US
5 University of CAMBRIDGE UK

Top 500 World Universities 2009 – ARWU

Критика и обвинения
Перекос в сторону СТМ наук – Nature, Science
Перекос в сторону СТМ наук – Nobel Prize Winners, Fields Medalists
Статья 2007 в авторитетном журнале Scientometric обвиняет ARWU в невоспроизводимости результатов. То есть, из изначальных данных невозможно получить итоговые цифры, пользуясь заявленной методологией.
«Irreproducability of the results of the Shanghai academic ranking of world universities», Razvan V. Florian. Scientometrics, 2007, V. 72, #1

Newsweek: 100 Global Universities
50% данные ARWU:
число исследователей, попавших в число часто цитируемых авторов по 21 области наук (HiCi);
Число статей, опубликованных авторами университета в журналах Nature и Science за последние пять лет (N&S);
Общее число статей, опубликованных в журналах Web of Science (SCIE, SSCI и AHCI) в предыдущем году (SCI);
В равных долях: по 50/3 %

Newsweek: 100 Global Universities
40 % данные THES
В равных долях по 10 %:
доля иностранных студентов вуза (International Students);
доля иностранных преподавателей вуза (International Faculty);
соотношение штата ППС и студентов вуза (Faculty / Student);
соотношение количества цитат и штата ППС (Citation/Faculty).
10% фонды библиотеки – число томов

Международные рейтинги университетов. 5. GUR
Наш международный рейтинг
Global University Ranking, GUR
«про наши говорить не хочется…»

Новый Глобальный Рейтинг Мировых Университетов 2009
Создатель Независимое рейтинговое агентство РейтОР
Вошло 430 университетов мира
http://www.globaluniversitiesranking.org/

GUR 2009
Массачусетский технологический институт, USA
Калифорнийский технологический институт, USA
Токийский университет, Japan
Колумбийский университет, USA
Московский государственный университет имени М.В. Ломоносова, Russia

GUR 2009
В Top 100 лучших университетов мира вошло 3 российских вуза
МГУ – 5 место,
МГТУ им. Баумана – 55 место,
СПбГУ – 84 место

Критика
Данные собираются не независимым образом из имеющихся международных источников, а на основании вопросника.
Решение о значимости того или иного раздела и о распределении мест в нем принимается экспертами .
Данных о весомости каждого разделе не приводится.
Не конкретизировано, что входит в др. – другие награды мирового уровня.
Членство в международных академиях вообще представляется сомнительной вещью.
Не конкретизировано, какие (где) публикации учитываются.
Почему не учитываются ссылки российских авторов, а если статья совместная? Кто считает эти ссылки и как? Да еще за истекший учебный год.
Пункт о числе выезжающих студентов и преподавателей я бы вообще поставила со знаком «минус». Кто поедет куда-то из Гарварда или Оксфорда?

Национальный рейтинг университетов. Интерфакс

Национальный рейтинг российских университетов
- образовательная деятельность вуза (вес в оценке - 0,2);
- научно-исследовательская деятельность вуза (0,2);
- социализаторская деятельность вуза (0,15);
- международная деятельность вуза (0,15);
- бренд вуза (0,15);
- общественное мнение о деятельности вуза (0,15).

Национальный рейтинг российских университетов – общий рейтинг
1. Московский государственный университет имени Ломоносова
2. Санкт-Петербургский государственный университет
3. Московский физико-технический институт
4. Российский университет дружбы народов
5-6. Российский государственный педагогический университет имени Герцена
5-6. Новосибирский государственный университет
7. Томский государственный университет
8. Нижегородский государственный университет имени Лобачевского
9-10. Дальневосточный государственный университет
9-10. Национальный исследовательский ядерный университет «МИФИ»

Национальный рейтинг российских университетов - классические
Московский Государственный Университет имени М.В. Ломоносова
Санкт-Петербургский государственный университет
Московский физико-технический институт (государственный университет)
Российский государственный педагогический университет имени А.И.Герцена
Российский университет дружбы народов
Новосибирский государственный университет
Томский государственный университет
Нижегородский государственный университет им. Н.И.Лобачевского
Дальневосточный государственный университет
"МИФИ

Национальный рейтинг российских университетов – международная деятельность вуза. ПетрГУ – 1
Категория "международная деятельность вуза" в рейтинге классических университетов основывается на нескольких показателях - дается оценка академической мобильности студентов, преподавателей, ученых; оценивается уровень образовательных программ с точки зрения их международной составляющей; также рассматривается репутация вуза за рубежом.
В результате анализа этих показателей рейтинг по критерию "международная деятельность" возглавил Петрозаводский государственный университет (100 баллов)

Про деньги.
(«СНАЧАЛА ВСЕ-ТАКИ НУЖНЫ ДЕНЬГИ...»)
По данным на статистических сайтах Рособразования Россия тратит на образование (2003 г) 3,7 % ВВП. Среднее по OECD – 5,8%.
Нет смысла перечислять страны, которые тратят больше. Меньше нас в 2003 году из 50 стран и стран-партнеров OECD истратили только 2 страны: Уругвай и Индонезия.
В МГУ на одного студента тратится 30 000 USD в год, в других университетах в 20-30 раз меньше, в американских университетах, начиная от 50 000 USD.
MIT – 300 000 USD/чел., CalTech – 1 mln USD/чел.,
Бюджет Гарварда, который занимает 1 место во всех рейтингах, кроме «нашего», равен 4 млрд. долларов в год:
20-25% финансирование из бюджета штата,
20-25% - гранты на исследования,
20-25% - доход за оплату обучения,
12-15% - доход от эндаумента (сам эндаумент был равен в 2008 г. 35 млрд долларов).
А у нас в России?

Рейтинги, индексы цитирования и национальные системы аттестации ВУЗов
Рейтинги составляются как правительственными так, что чаще и неправительственными структурами.
Они учитывают многие показатели: иногда количественные иногда качественные.
Они бывают объективными и субъективными.
Они бывают авторитетными и неавторитетными.
С ошибками и без.