Академический рейтинг университетов мира по предметным областям[1] 2006 г.

 

Йинг Ченг и Ниан Кай Лю

 

По многочисленным просьбам о составлении рейтинга университетов мира по широким предметным областям/школам/колледжам и по предметам/ образовательным программам/факультетам, авторы предлагают на рассмотрение методологию ранжирования и проблемы, возникшие при проведении исследовании. Институтом высшего образования Шанхайского университета (Shanghai Jiao Tong University) был составлен академический рейтинг университетов мира по широким предметным областям (ARWU-FIELD) в 2006 г.. Используя объективные показатели и данные, сравнимые в международном масштабе, авторы ранжировали вузы по пяти предметным направлениям: естественные науки и математика (SCI), техника/технологии и вычислительная техника(ENG), биология и агрономия(LIFE), клиническая медицина и фармацевтика (MED), а также социальные науки(SOC).

 

 

Введение

 

С того момента, как был опубликован первый академический рейтинг университетов мира (ARWU) в 2003 г. (Институт высшего образования Шанхайского университета – Shanghai Jiao Tong University, 2006 г.), к нам поступали многочисленные  просьбы составить рейтинг университетов мира по широким предметным областям/школам/колледжам и по предметам/программам/факультетам. Многие ведущие университеты Китая заинтересованы в том, чтобы узнать о своих позициях в мире  именно в широких предметных областях. Как отклик на эти просьбы, мы изучили возможность ранжирования университетов мира с использованием этого метода.

Существует большое разнообразие рейтингов школ и программ в рамках национальных рейтинговых моделей. Наиболее известный пример – рейтинг лучших магистратур Америки, составленный журналом «US News and World Report»  (2006).    В 2004 г. Times Higher Education Supplement («Приложение о высшем образовании» британской газеты «Times» (2006)) опубликовало свой рейтинг университетов мира по направлениям – искусство и гуманитарные науки, социальные науки, техника и информационные технологии, а также медико-биологические исследования, используя метод сравнительного исследования. В 2005 г. Центр информационных технологий и менеджмента Техасского университета в Далласе опубликовал свой рейтинг 100 лучших школ бизнеса мира (2006), основанный на ряде публикаций 24 ведущих журналов в основных отраслях бизнеса в течение 2001-2005 гг.

В данной статье представлены предварительные результаты нашего исследования академического рейтинга университетов мира в разных предметных областях (ARWU-FIELD). Было выделено пять широких предметных областей. Для формирования рейтинга использовались только объективные показатели и данные, сравнимые в международном масштабе.

 

 

Методология

 

Отбор университетов

В наш рейтинговый список были включены все учебные заведения, имеющие своих нобелевских лауреатов и лауреатов других премий, а также высоко цитируемых исследователей. Кроме того, в рейтинг были включены важнейшие университеты всех стран, опубликовавших значительное количество статей, отмеченных индексами цитирования  по естественным и социальным наукам (SCIE - индекс и SSCI-индекс). В целом же, более тысячи учебных заведений были ранжированы как по отдельным предметным областям, так и в рамках рейтинга ARWU.

 

Определение предметной области

Университеты ранжируются по пяти широким предметным областям, включая естественные науки и математику (SCI), технику/технологии и вычислительную технику(ENG), биологию и агрономию (LIFE),клиническую медицину и фармацевтику (MED), а также социальные науки(SOC). Гуманитарные науки и искусство не вошли в этот список из-за трудностей технического свойства, связанных с нахождением показателей с надежными данными, сравнимых в международном масштабе. Психология также не включена в список по той причине, что обладает всеми признаками многодисциплинарной науки.

 

Критерии ранжирования и их вес

Аналогично рейтингу ARWU, вузы ранжируются по их академической или исследовательской деятельности в каждой широкой предметной области. В качестве рейтинговых показателей включены количество лауреатов Нобелевской премии и других премий среди выпускников и профессорско-преподавательского состава, количество исследователей с высоким индексом цитирования, количество статей, отмеченных индексами цитирования по естественным (SCIE) и социальным наукам (SSCI). Были также введены два новых показателя: первый – процент статей, опубликованных в 20% ведущих журналов в каждой предметной области, и второй – расходы на технические исследования. В таблице 1 подробно рассмотрены показатели и их вес.

ТАБЛИЦА 1

 

Определение показателей

Под Alumni понимается общее количество выпускников данного вуза, ставших Нобелевскими лауреатами  в области физики, химии, медицины и экономики или получивших другую признанную научную награду – Field Medals – в области математики. Выпускниками считают каждого, кому присвоена степень бакалавра, магистра или доктора наук в данном вузе. Вес показателя устанавливается в соответствии с периодом получения степени. За 100% признали выпускников, окончивших вуз в 1991-2000 гг., 80% получили выпускники с 1981 по 1990 гг., 60% –  выпускники, окончившие вуз с 1971 по 1980 гг., 40% – с 1961 про 1970 гг. и, наконец, 20% – в период с 1951 по 1960 гг.. В случае, если выпускник получает больше чем одну степень в вузе, засчитывается только одна. Нобелевские лауреаты в области физиологии или медицины учитываются как в LIFE, так и в MED рейтинге.

Под Award понимается общее количество представителей преподавательского состава данного вуза, ставших Нобелевскими лауреатами в области физики, химии, медицины и экономики или получивших другую признанную научную награду - Field Medals  в области математики. Под преподавательским составом понимаются преподаватели, работавшие в вузе на момент получения награды. Вес  показателя устанавливается в соответствии с периодом получения награды. За 100% были взяты лауреаты премий, награжденные в период с 2001 по 2005 гг., 80% получили лауреаты премий в период 1991-2000 гг., 60% - в период с 1981 по 1990 гг., 40% в период с 1971 по 1980 гг. и, наконец, 20% – лауреаты премий, награжденные в период с 1961 по 1970 гг.. Если лауреат премии связан  больше чем  с одним вузом, каждому вузу присваивается сумма баллов, соответствующая обратному числу от количества вузов. Что касается Нобелевской премии, если она присваивается больше чем одному человеку, вес данного показателя распределяется пропорционально тому, как распределилась премия. Нобелевские лауреаты в области физиологии или медицины учитываются как в LIFE, так и в MED рейтинге.

Показатель HiCi указывает на количество наиболее цитируемых ученых в 21 предметной категории. Данные исследователи должны обладать самым высоким индексом цитирования в своей категории. Определение предметных категорий и подробное описание процедуры можно найти на веб-сайте информационного ресурса компании Thomson «ISI Web of Knowledge of Thomson Corporation». Исследователи с наивысшим индексом цитирования распределяются по пяти предметным областям (подробности в Таблице 1). Если ученый упоминается в более чем одной предметной категории, его/ее вес в каждой категории рассчитывается как обратное число от количества перечисленных категорий.

Показатель PUB рассматривается как общее число статей, приведенных Индексами цитирования по естественным и социальным наукам в 2004 г. Засчитываются только публикации. Каждая статья, опубликованная вузом, засчитывается в одной из шести предметных областей, включая уже упомянутые пять, а также междисциплинарные и многодисциплинарные науки. Если статья опубликована в журнале, в котором представлено больше одной предметной категории ISI, она распределяется по соответствующим группам.

Показатель TOP указывает  процент статей, опубликованных в 20% ведущих журналов в каждой широкой предметной области. 20% ведущих журналов определяются как коэффициенты столкновения в 20% ведущих из каждой предметной области ISI согласно докладу библиометрического справочника «Journal Citation Report» в 2004 г.. Статьи в ведущих журналах каждой предметной области также распределены по  шести широким предметным областям. Показатель TOP рассчитывается как количество статей в ведущих 20% журналах в каждой предметной области по отношению к общему количеству статей по этому предмету. Пороговой величиной является минимальное количество ведущих статей в каждой предметной области. Пороговая величина определяется как 10% от среднего количества ведущих статей, опубликованных тремя ведущими вузами в каждой предметной области. Если количество ведущих статей, опубликованных вузом, не достигает минимальной пороговой величины, то показатель TOP не рассчитывается по данному вузу, а его вес перераспределяется в пользу других показателей. Засчитываются только опубликованные статьи.

Показатель Fund определяется как общая сумма расходов на технические исследования в 2004 г. Этот  показатель используется только для рейтинга ENG. Если данные по всем вузам страны не могут быть собраны, показатель Fund  не рассчитывается, а его вес перераспределяется в пользу других показателей. Данные для этого рейтинга о суммах расходов на технические исследования предоставлены только вузами США и  Канады.

 

Процедура подсчета баллов

По каждому показателю вуз, набравший наибольшую сумму баллов, принимается за 100 %, а баллы, набранные другими вузами, рассчитываются в процентном соотношении к нему. Распределение данных по каждому показателю проверяется на предмет искажающих факторов, и в случае необходимости значения показателей подгоняются при помощи стандартных статистических приемов.

Для получения итогового балла для каждого вуза складываются баллы по каждому показателю в соответствии со своим весом. Вуз, набравший наибольшее количество баллов, принимается за 100 %, а другие вузы рассчитываются в процентном соотношении к наибольшему количеству баллов. Набранные суммы баллов располагаются в порядке убывания.

 

 

Результаты

 

Статистические данные по региону и предметной области

На таблице 2 представлены двадцатка ведущих вузов и 100 ведущих вузов в каждой предметной области по регионам. Вузы Северной Америки и Южной Америки составляют более 70%  от 20 ведущих вузов и более 60% от 100 ведущих вузов во всех предметных областях, кроме ENG. Европейские вузы имеют ощутимое преимущество среди ведущих вузов в предметных областях LIFE, MED и  SOC по сравнению с вузами Азиатско-Тихоокеанского региона, которые соответственно больше представлены в двадцатке ведущих вузов и в 100 ведущих вузов категории  ENG, нежели  европейские университеты. Среди 100 лучших вузов по всем  предметным областям нет ни одного вуза из Африки.

ТАБЛИЦА 2

Статистические данные по стране и предметной области

В таблице 3 отражено положение  ведущих вузов в каждой предметной области по странам. Ведущая двадцатка по предметным областям представлена только шестью странами. Доминирующее положение в ней занимают  США, в то время как Великобритания и Япония представлены в основном в рейтингах 20 и 100 ведущих вузов.

ТАБЛИЦА 3

Интересно отметить, что семь стран, чьи учебные заведения не попали в 100 лучших вузов по рейтингу ARWU 2005, представлены в 100 ведущих вузов по предметным областям. Большая часть из них находится в Азиатском регионе и расположена в 100 ведущих вузов категории ENG. Общее количество стран, представленных по категориям в 100 ведущих вузов, 23.

Стоит отметить, что большинство ведущих вузов категории SOC  из англоязычных стран. США представлены во всех 20 ведущих вузов двадцатки  и в 84 из 100 ведущих вузов в категории SOC, что частично объясняется влиянием англоязычных стран в данной категории. Аналогичные результаты могут быть обнаружены и в других основанных на объективной информации рейтингах по социальным наукам, таких как мировой рейтинг экономических факультетов (Coupй, 2006) и рейтинг факультетов политологии (Hix, 2004).

Статистика по странам и количеству ведущих предметных областей в каждом вузе

В таблице 4 отражены количественные данные о вузах каждой страны, представленных в двадцатке и 100 ведущих вузов с различным числом предметных областей. Единственный вуз со всеми пятью предметными категориями, попавший в двадцатку ведущих вузов, находится в США. 19 из 22 вузов, представленных во всех пяти предметных областях в 100 ведущих вузов, также из США. Общее количество вузов с хотя бы одной предметной категорией в 20 и 100 ведущих вузов соответственно 52 и 228.

ТАБЛИЦА 4

 

Деятельность отдельных вузов

Деятельность отдельных вузов в пяти предметных областях показана в таблице 5. Гарвардский университет (Harvard University) занимает первое место в категориях SCI, LIFE, MED и  SOC, тогда как Массачусетский технологический институт (the Massachusetts Institute of Technology) имеет наивысшее количество баллов в категории ENG. Стэнфордский университет (Stanford University) является единственным вузом, представленным в первой двадцатке со всеми пятью категориями. В первою двадцатку в четырех категориях попали Гарвардский университет (Harvard University), Кембриджский университет (University of Cambridge), Массачусетский технологический институт (the Massachusetts Institute of Technology) и Колумбийский университет (Columbia University). 11 университетов ранжированы в трех предметных категориях в первой двадцатке и с двумя категориями в ведущих 100 вузах. Из вузов, расположенных в Азиатско-Тихоокеанском регионе, наилучшие позиции занимают Университет Киото (Kyoto University), представленный в двух областях первой двадцатки и в трех категориях в 100 ведущих вузов, и Токийский университет (Tokyo University), попавший с одной категорией в первую двадцатку, а с четырьмя предметными областями в 100.

ТАБЛИЦА 5

 

 

Дискуссионные вопросы

 

Количество против качества

Вечно возникает вопрос о том, могут ли знания студентов измеряться баллами. Тем не менее, университеты и педагоги продолжают измерять знания студентов системой баллов без каких-либо надежд на перемены в будущем. Студентам всякий раз говорят о том, что их знания не будут  оценивать  только баллами, когда вузы и работодатели будут иметь возможность проводить усовершенствованную и независимую оценку.

Подобным же образом, постоянно возникает вопрос о том, может ли качество университетов измеряться пустыми цифрами. Следовательно, следует осторожно подходить к любому ранжированию и нельзя полагаться только на рейтинги, включая рейтинги ARWU и ARWU-FIELD. Вместо этого любые рейтинги надо использовать/рассматривать как один из видов справочной информации и оценивать результаты рейтингов, исходя из  их методологии.

Исследования против образования

Так как разные заинтересованные стороны имеют разные ожидания относительно качества, качество вузов с трудом поддается сравнению в международном масштабе. Было бы невозможно ранжировать университеты по качеству образования во всем мире, поскольку существуют значительные различия между университетами в разных странах, а также трудности технического характера, связанные со сбором сравнимых в международном масштабе данных.

Если бы кто-нибудь захотел составить надежный рейтинг университетов мира, единственным возможным видом ранжирования было бы сравнительный анализ  их исследовательской деятельности. Следовательно, мы выбрали способ ранжирования университетов мира по исследованиям в пяти широких  предметных областях, используя сведения об их академической или исследовательской деятельности, основанные на данных, которые поддаются сравнению в международном масштабе и проверке и контролю, если б кто-либо захотел это сделать. Мы не использовали субъективные показатели. Кроме того, мы не собирали информацию из каких-либо университетских отчетов.

 

Язык и типы публикаций

Поскольку английский язык является международным в академическом сообществе, студенты из англоязычных вузов более тесно вовлечены в глобальное академическое сообщество, чем студенты из неанглоязычного мира. Как результат, ранжирование университетов по исследовательской деятельности неминуемо ведет к тому, что вузы вне англоязычного сообщества оказываются в стороне. Единственным возможным решением было бы установление специальной квоты на публикации на родном языке.

В рейтинге ARWU-FIELD засчитываются  публикации только оригиналов статей. Статьи коммуникационного типа являются важным источником об оригинальных исследованиях. Они не основаны на том условии, что большая часть коммуникационной деятельности в итоге оказывается опубликованной в статьях. Академические книги являются также важным источником оригинальных исследований и  чаще всего затрагивают одни предметные области, нежели другие. Книги не засчитываются в рейтингах из-за технических сложностей в сборе данных, сравнимых в международном масштабе.

Отбор наград и опыт награжденных

Существует много популярных наград и премий, таких как Нобелевская премия,  Field Medal, Абелевская премия, премия Тьюринга, премия Джона и Алисы Тайлер, Пулитцеровская премия и др. Как бы то ни было, Нобелевская премия и Field Medal наиболее признаны международным академическим сообществом, поэтому их использовали в рейтинге ARWU-FIELD. Чтобы компенсировать возникший при этом отход от других дисциплин, другие премии будут нами учтены в будущих рейтингах, где будет определен вес каждой премии на научном поприще. В дополнение заметим, что Нобелевская премия по физиологии и медицине учитывается одновременно в двух рейтингах по категориям LIFE и MED по причине технических сложностей точного распределения премий по этим категориям.

Теперь об опыте обучения и работы самих награжденных. Награжденные премиями могут получить их в других вузах, отличных от тех, где были проведены соответствующие исследования. Аналогично вузы, где обладателям наград были присвоены степени и где они провели большую часть свого обучения, могут быть разными. Постдокторская и другая подготовка, не связанная с присвоением степени, не засчитывается. Кроме того, некоторые лауреаты премий получили свои степени в других научных дисциплинах, а не в тех, где их заслуги были признаны.

 

Распределение статей по предметным категориям

Как было упомянуто выше, статьи, выпущенные в вузе, распределяются по шести предметным областям. При этом только статьи по пяти предметным категориям учитываются в рейтинге ARWU-FIELD. Статьи в журналах по многодисциплинарным и междисдисциплинарным наукам, а также по психологии не учитываются при  ранжировании ARWU-FIELD. Те вузы, деятельность которых заключена строго в рамки вышеприведенных категорий, не могут быть справедливо представлены  в рейтинге.  К журналам по многодисциплинарным и междисдисциплинарным наукам и  по психологии относятся самые престижные издания, такие как журнал « Nature and Science».

 

Определение вузов

Вузы внутри «многокампусной» системы университетов США рассматриваются как отдельные заведения согласно Системе данных по интегрированному постсекундарному (высшему) образованию Национального центра по сбору статистической информации об образовании (Integrated Postsecondary Education Data System of the National Center for Education Statistics) и Классификации  вузов по Карнеги (the Carnegie Classification of Institutions of Higher Education). Например, Калифорнийский университет в Лос-Анжелес (the University of California, Los Angeles) ранжируется как самостоятельное учреждение. Аналогично этому, Имперский колледж Лондонского университета (Imperial College of the University of London) также оценивается отдельно.

Учреждения или исследовательские организации, связанные с вузами, рассматриваются в соответствии с тем, каким образом выражено членство их авторов. Если авторы идентифицируются себя в качестве членов университета, соответственно это будет учтено в рейтинге. Типичный пример – Ecole Polytechnique (Высшая политехническая школа) в Монреале, являющаяся дочерним учреждением Монреальского университета (University of Montreal) в Канаде.  Лаборатории Centre National de la Recherche Scientifique  (CNRS  - Национального центра научных исследований), связанные с университетами Франции, рассматривались таким же образом.

Госпитали, связанные с университетами, представляют собой комплексную проблему во многих странах. Некоторые госпитали не  желают включать названием университета в свое наименование, в то время как некоторые университеты со своей стороны не хотят включать в свою статистику статьи, опубликованные сотрудниками госпиталей. Поэтому госпитали, связанные с вузами, рассматриваются в соответствии с  тем, каким образом выражено членство их авторов

Более того, вузы и связанные с ними организации обязаны писать полное наименование авторства в своих публикациях. Это не должно быть обязанностью составителей баз данных и их пользователей.

 

Наименования вузов

Многие университеты имеют больше чем одно всеми используемое наименование.  Во Франции, например, Парижский университет 6 (the University of Paris 6) также называют университетом Пьера и Марии Кюри (Pierre and Marie Curie University). В США, Virginia Tech  означает то же самое, что и Вирджинский политехнический государственный университет (Virginia Polytechnic and State University). В Китае  в ряде вузов используется традиционное написание имен, как например, Tsinghua University вместо Qinghua University.

Вузы в неанглоязычных странах часто имеют разные наименования для одного и того же вуза либо одно и то же название для разных вузов из-за различных вариантов перевода. Например, Universitй Libre de Bruxelles  и  Vrije Universiteit Brussel  в Бельгии имеют одно и то же английское наименование Free University of Brussels (Свободные университет Брюсселя). Universittдt zu Kцln в Германии может быть переведен как University of Koeln или University of Cologne (Кельнский университет).

Большая часть вузов использует в своем названии аббревиатуры. Например, ETHZ означает Swiss Federal Institute of Technology of Zurich (Швейцарский федеральный технический институт Цюриха); UMPC используется для University of Paris 6 (Парижский университет) во Франции.

 

Слияние и разделение вузов

Наименования вузов претерпели значительные изменения  в результате слияния, разделения, приостановки деятельности и смены названия. Например, Манчестерский университет и UMIST в Великобритании слились воедино в октябре 2004.University of Kwazulu-Natal в Южной Африке появился в результате слияния University of Natal  и University of Durban-Westville в январе 2004. Университет Инсбрука в Австрии разделился на два независимых вуза, Университет Инсбрука и Медицинский университет Инсбрука.

 

Поиск в базе и установление авторства публикаций

Следует соблюдать большую осторожность при введении ключевых слов в поиске для вуза, расположенного в большом городе. Например, при введении в окно поиска просто выражения Beijing University, можно получить в списке результатов данные о дюжине университетов в городе Beijing.

При поиске исследователей с наивысшим индексом цитирования мы загрузили весь список из базы данных ISI и по одному за другим устанавливали авторство. Исследователи с правильно указанным названием факультета, института или школы вуза без упоминания названия вуза были аккуратно соотнесены с действительно правильным названием университета.

Для статей, приведенных Индексами цитирования по естественным и социальным наукам, мы попытались всевозможными способами найти решение возможных проблем, и большинство из них были решены.

 

 

Итоговые замечания

 

Всякое ранжирование может быть подвергнуто сомнению и не существует абсолютно объективных рейтингов. Несмотря на это, рейтинги вузов завоевали популярность во многих странах. Независимо от того, выражают ли университеты и другие учебные заведения свое одобрение разным моделям рейтингов, рейтинговые системы не прекратят свое существование. Основной темой дискуссии является вопрос, как усовершенствовать рейтинговые модели, чтобы извлечь из этого пользу для высшего образования.

ARWU-FIELD является независимым академическим исследованием, проведенным без какого бы то ни было внешнего участия. В нем используются тщательно отобранные, не субъективные критерии и данные, которые поддаются сравнению в международном масштабе и проверке. Несмотря на это, возникает множество проблем с ранжированием, как это обсуждалось выше.

Мы будем тщательно изучать все связанные с ARWU-FIELD проблемы и беспрерывно работать над усовершенствованием ранжирования. Итоговые результаты рейтинга ARWU-FIELD опубликованы на нашем веб-сайте (http://ed.sjtu.edu.cn/ARWU-FIELD) и ежегодно обновляются.

 

 

Литература

 

1. Center for Information Technology and Management, University of Texas, Dallas. Top 100 World-wide Ranking of Business Schools. Retrieved on 10 May 2006, from http://citm.utdallas.edu/utdrankings/.

2. Coupй, T. Revealed Performances: Worldwide Rankings of Economists and Economics Departments. Retrieved on 10 May 2006, from http://student.ulb.ac.be/~tcoupe/updaterevealedperformances.pdf.

3. Hix, S. (2004). A Global Ranking of Political Science Departments. Political Studies Review, 2(3), 293-313.

4. Institute of Higher Education, Shanghai Jiao Tong University. Academic Ranking of World Universities. Retrieved on 10 May 2006

5. Times Higher Education Supplement: World University Rankings. Retrieved on 10 May 2006, from http://www.thes.co.uk/worldrankings/.

6. U.S. News and World Report: America’s Best Graduate Schools. Retrieved on 10 May 2006, from http://www.usnews.com/usnews/edu/grad/rankings/.

 

 

---

[1] Это исследование было частично спонсировано Национальным фондом поддержки естественных наук Китая (номер гранта: 70673062).