Showing posts with label 5-100-2020. Show all posts
Showing posts with label 5-100-2020. Show all posts

Monday, 9 February 2015

Международные научные проекты российских университетов

Сегодня мы поговорим о международных исследовательских проектах, в которых участвуют российские научные организации. Частично я уже касался этой темы, когда анализировал влияние участия в ЦЕРНовских проектах на цитируемость России в целом - и университетов в частности, но тема куда более глубокая. Чем ещё интересно международное сотрудничество в науке?

Особенность, которую мы с коллегами в Thomson Reuters отмечаем регулярно и по всему миру: результаты международных совместных исследований в среднем цитируются лучше, чем совместные проекты в пределах страны или города. Давайте посмотрим в InCites, что видно конкретно по России, для примера возьмём Томский Политехнический Университет и посмотрим, с кем в России сотрудники ТПУ работали наиболее активно:

Самые популярные российские научные партнёры Томского Политехнического Университета. Число в круге - количество совместных статей с 2004 года.
Как видно, самое большое количество совместных проектов у ТПУ было с институтами РАН и с расположенным буквально через дорогу ТГУ. Как цитировались эти статьи?

Нормализованная средняя цитируемость совместных проектов ТПУ в России. Единица - среднемировой уровень.
При этом, нормализованная средняя цитируемость самого ТПУ за это время составляет 0,38. Интересно, что совместные работы с самым высокоцитируемым российским университетом - НИЯУ МИФИ - оказались самыми низкоцитируемыми из выборки, также интересен тот факт, что ни в одном из кругов мы не видим числа больше единицы, то есть, в среднем все коллаборации ТПУ внутри России цитируются ниже - или кое-где даже существенно ниже - среднемирового уровня. Самыми успешными оказались 14 совместных статей с МГУ.

Теперь международные проекты.

Самые популярные международные научные партнёры Томского Политехнического Университета. Число в круге - количество таких статей с 2004 года.

Тут плотность результатов гораздо выше, но интересно не это. Интересно вот что:

Нормализованная средняя цитируемость международных проектов ТПУ. Единица - среднемировой уровень.

Надо заметить, что не каждый совместный проект с иностранной организацией обречён на высокую цитируемость - ТПУ повезло с партнёрами, в частности - с Университетом Минессоты, центрами Объединения Гельмгольца и Майнцским Университетом Иоганна Гутенберга. И это неплохая идея для дальнейшего развития науки в российских научных организациях: более активная интеграция в международный исследовательский процесс, при которой во главу угла ставится выбор наиболее авторитетных или эффективно работающих институтов и университетов в тех предметных областях, в которых наши организации хорошо себя проявляют и, следовательно, могут быть интересны иностранцам как потенциальные партнёры.

Было бы великолепно, если бы российские организации имели потенциал для совместной работы друг с другом, позволяющий проводить действительно прорывные научные исследования, которые, в свою очередь, потом регулярно попадали бы в списки самых высокоцитируемых работ, но пока сколько-нибудь значительного количества примеров подобного сотрудничества мне обнаружить не удалось.

На всякий случай я ещё раз приведу врезку о том, что такое нормализованная средняя цитируемость, один из важнейших наукометрических показателей, который показывает, хорошо или плохо цитируются научные статьи - и, главное, позволяет сравнивать результаты исследований в разных предметных областях.

Tuesday, 9 December 2014

Соотношение процитированных и непроцитированных работ у ведущих российских университетов: часть IV

Заключительный, четвёртый обзор этого года - но он будет продолжен в следующем году, я постараюсь так же публиковать обновления раз в квартал.

Напомню, нас интересуют два показателя университетов: сколько они публикуют (публикационная активность, она же научная производительность) и как всё это потом цитируют во всём мире (цитируемость статей, она же авторитетность, влиятельность или эффективность исследований). Подсчитать первый показатель практически в реальном времени не составит никакого труда, а вот второго надо подождать как минимум пару лет, прежде чем делать какие-то выводы. И тут нам приходят на помощь показатели, по которым правильность или неправильность решений руководства университетов проекта "5-100" о развитии науки в них можно оценить с гораздо меньшей задержкой. Начнём, как водится, с соотношения процитированных и непроцитированных статей 2013 года. 

Соотношение процитированных и непроцитированных работ 2013 года университетов-участников проекта "5-100"
Чтобы было понятно, хорошие это показатели или нет: МГУ - 47,0%, СПБГУ: 46,95%, Россия в целом: 37,17%, Кембридж: 56,48%.

По мере отдаления от даты публикации этот показатель будет уступать в актуальности показателю нормализованного цитирования, так что именно сейчас я впервые попробовал оценить зависимость между этими двумя показателями. График ниже увеличивается при нажатии, зависимость между показателями налицо. Если убрать Высшую Школу Экономики (которая, как я уже не раз писал, активнее других занимается общественными науками, где цитируемость ниже и накапливается дольше), то линейный коэффициент корреляции между этими двумя показателями будет равен 0,83.

Взаимозависимость показателей нормализованной средней цитируемости и соотношения процитированных и непроцитированных работ

Иными словами, по итогам этого года у нас есть четыре университета, чьи статьи в среднем цитируются заметно лучше других, при этом успехи трёх из них - МИФИ, НГУ и МФТИ - мы увидели ещё в первой половине года, а про четвёртый - ВШЭ - сразу сказали, что таким способом не увидим.

Это говорит о том, что, взглянув в марте 2015 года (а это всего через 3 месяца, включая праздники) на аналогичные значения для статей 2014 года, мы с высокой степенью достоверности сможем сделать выводы о цитируемости университетов в этом году. Попробуем уже сейчас провести кое-какие наблюдения, хотя какие-то выводы делать пока и рано:

Соотношение процитированных и непроцитированных работ 2014 года университетов-участников проекта "5-100"
Опять же, как это соотносится с нашими проверочными точками: МГУ - 19,38%, СПБГУ: 16,18%, Россия в целом: 14,22%, Кембридж: 29,57%.

На верхнюю строчку в этом году вырвался МИСИС. Если он окажется на том же месте и через 3 месяца - мы будем присматриваться к нему повнимательнее, поскольку, скорее всего, это уже будет индикатором серьёзного роста цитируемости университета.

Наконец, какие цифры публикационной активности университетов мы увидим в июне 2015 года? В прошлом посте я уже делал достаточно грубый прогноз, теперь я его уточняю. Три университета - Санкт-Петербургский Политехнический, Томский Государственный и НИЯУ МИФИ успели опубликовать за прошедший квартал столько статей, что мне бы надо пересмотреть прогноз, чего я делать принципиально не буду, поскольку должен же я хотя бы раз ошибиться в предсказаниях.

Прогноз итоговых показателей публикационной активности 2014 года университетов-участников проекта "5-100"

Tuesday, 11 March 2014

Соотношение процитированных и непроцитированных работ у ведущих российских университетов

На выходных задумался, а что же мы совсем не пользуемся таким замечательным показателем, как соотношение процитированных и непроцитированных статей для оперативной оценки, например, университетов-участников проекта 5-100? Смотрите, что можно сделать, если сравнить их таким образом за 2013й год:

Процитированные статьи Всего статей Процент процитированных статей
Новосибирский Государственный 272 949 28,66%
НИЯУ МИФИ 134 489 27,40%
Самарский Аэрокосмический 10 41 24,39%
МФТИ 160 695 23,02%
Дальневосточный Федеральный 49 223 21,97%
Казанский Федеральный 83 433 19,17%
ННГУ им. Лобачевского 59 315 18,73%
Санкт-Петербургский Политехнический 57 311 18,33%
ИТМО 49 273 17,95%
НИТУ МИСиС 42 237 17,72%
ЛЭТИ 20 114 17,54%
Уральский Федеральный 91 540 16,85%
Томский Государственный 83 515 16,12%
Высшая Школа Экономики 41 283 14,49%
Томский Политехнический 33 238 13,87%

Особняком здесь стоит только Вышка, у которой показатель ниже среднего всё-таки можно объяснить уклоном в сторону общественных наук, где цитируемость стандартно ниже и медленнее (впрочем, вот здесь есть все основания полагать, что и по этому показателю ВШЭ будет медленно, но подниматься в этом списке), и СГАУ, у которого количество статей пока довольно невысокое. Теперь я раз в квартал, а может, и чаще, буду обращаться к обновлённым показателям, в том числе - за 2014й год, и сравнивать их с приведёнными выше, а результаты обязательно буду выкладывать здесь. Теперь давайте попробуем разобраться, много это или мало в масштабах России.

МГУ: 23.1%
СПБГУ: 22.4%
Россия в целом за 2013й год: 17.2%

А вот - некоторые международные ориентиры:

Cambridge University: 34.9%
Humboldt University (94е место в рейтинге THE за прошлый год): 31.5%

Не думаю, что этот показатель когда-нибудь станет популярным, но в данном случае он интересен тем, что:
- в гораздо большей степени, чем суммарное или среднее цитирование, годится для сравнения организаций, работающих в разных предметных областях (хотя окончательно и не решает проблему с разным поведением цитирования в разных областях знания);
- для его подсчёта не обязательно ждать конкретной даты: срез мы можем сделать когда захотим, главное - чтобы дата выгрузки совпадала по всем сопоставляемым организациям и/или странам. В этой статье выгрузка сделана по состоянию на 7е марта 2014 г;
- есть у меня предположение (дополнительно проверю и результатами поделюсь здесь же), что именно шлейф из большого количества нецитируемых работ так негативно влияет на показатели России в мире, и стремление к снижению их количества на уровне организации или страны в целом как раз может дать толчок суммарным индикаторам.

Наконец, количество процитированных и непроцитированных работ можно очень легко подсчитать, имея под рукой только Web of Science: находим все статьи за интересующий период, сортируем их по цитируемости и, почти как предлагал в своё время Хорхе Хирш,  листаем до страницы, на которой находится граница статей с цитированием 1 и цитированием 0.