Научный ландшафт 2012-2020: количество и качество
Совместный проект @trueresearch и @boilingmephi, который поможет лучше разобраться в устройстве научно-образовательного пространства.
Часть 4. Самостоятельность исследований: методика расчёта
В новой части нашего анализа мы планируем глубже вникнуть в структуру публикационной активности вузов проекта «5-100» и институтов РАН. Наиболее острые вопросы — реальный вклад организаций в публикуемые статьи и множественные аффилиации авторов. К сожалению, стандартные инструменты не предоставляют такую статистику в явном виде, поэтому была предпринята попытка восстановить её косвенным образом. Итак, задача: найти средний вклад организации в публикуемую статью. Приводим подробное объяснение методики, результаты - сразу после.
За основу был взят показатель КБПР (комплексный балл публикационной результативности), который рассчитывается РИНЦ и выкладывается в открытом доступе на портале elibrary.ru. Этот показатель напрямую учитывает вклад научной организации в публикуемые статьи: например, если только 2 из 10 соавторов указали данный вуз/институт в качестве места работы, то и в зачёт пойдут 20% от условной стоимости статьи в баллах. Если же каждый автор указал по 2 места работы, то, соответственно, одной организации зачтётся ещё вдвое меньше баллов. РИНЦ позволяет проследить изменение общего КБПР организации (суммарного и по отраслям знаний) с 2011 по 2020 годы.
Цена самой статьи при расчёте КБПР сильно зависит от квартиля журнал: публикация в журнале первого квартиля WoS стоит 20 баллов, в Q2 — 10 баллов, в Q3 — 5 баллов, в Q4 — 2,5 балла, в остальном ядре РИНЦ (остальных журналах WoS, Scopus, RSCI без квартиля) цена статьи составляет 1 балл. РИНЦ позволяет увидеть, как менялся по годам средневзвешенный импакт-фактор журнала, в котором опубликованы статьи данной организации, но не предоставляет информацию о квартилях журналов. Поэтому для анализа нам была необходима простая связь между импакт-фактором журнала и его квартилем, а значит и стоимостью статьи по методике КБПР. Усреднение импакт-факторов журналов из разных областей показывает, что для естественных наук можно использовать приблизительную формулу:
[стоимость статьи по КБПР] = 4 * [импакт-фактор журнала],
причём в математических науках лучшее совпадение даёт коэффициент 5 вместо 4, в среднем по всем наукам — коэффициент 6. Мы отбрасываем журналы из списка ВАК, так как их вес в КБПР равен 0,12 балла, что не позволяет им заметно влиять на итоговую сумму КБПР при существующем распределении статей по категориям журналов.
Как же вычислить средний вклад вуза/НИИ в статью? Предположим, что за 2015 год организация набрала 1000 баллов КБПР, опубликовав 500 статей в ядре РИНЦ со средним импакт-фактором 2,5. Это означает, что 1 статья принесла данному заведению 1000/500 = 2 балла. Но полная стоимость статьи с таким импакт-фактором составляет 10 баллов (по формуле 4*2,5; получилось, что в среднем авторы публикуются в Q2). Следовательно, средняя доля организации в статьях составляет 2/10 = 20%.
Эмпирическая проверка показывает, что оценка хорошо работает для организаций естественнонаучного профиля, со средним импакт-фактором статей больше единицы. В случае общественного или гуманитарного профиля или при среднем импакт-факторе статей < 0,5 формула может завышать "коэффициент самостоятельности". При расчётах для единообразия результатов всюду применялся коэффициент 4, коррекция коэффициента (6 вместо 4) применялась только для ВШЭ, у которой заметно доминируют публикации по общественным и гуманитарным наукам.
Также РИНЦ предоставляет статистику распределения статей данной организации по числу соавторов, что позволяет найти среднее число соавторов в статье (статьи в мега-коллаборациях были исключены из рассмотрения). Умножая его на найденный выше коэффициент самостоятельности, мы получаем среднее число сотрудников из данной организации, участвующих в одной публикации. Если оно ниже единицы, например равно 0,5 или 0,33, значит в среднем в статье участвует один автор, который указывает 2 или 3 места работы соответственно.
Совместный проект @trueresearch и @boilingmephi, который поможет лучше разобраться в устройстве научно-образовательного пространства.
Часть 4. Самостоятельность исследований: методика расчёта
В новой части нашего анализа мы планируем глубже вникнуть в структуру публикационной активности вузов проекта «5-100» и институтов РАН. Наиболее острые вопросы — реальный вклад организаций в публикуемые статьи и множественные аффилиации авторов. К сожалению, стандартные инструменты не предоставляют такую статистику в явном виде, поэтому была предпринята попытка восстановить её косвенным образом. Итак, задача: найти средний вклад организации в публикуемую статью. Приводим подробное объяснение методики, результаты - сразу после.
За основу был взят показатель КБПР (комплексный балл публикационной результативности), который рассчитывается РИНЦ и выкладывается в открытом доступе на портале elibrary.ru. Этот показатель напрямую учитывает вклад научной организации в публикуемые статьи: например, если только 2 из 10 соавторов указали данный вуз/институт в качестве места работы, то и в зачёт пойдут 20% от условной стоимости статьи в баллах. Если же каждый автор указал по 2 места работы, то, соответственно, одной организации зачтётся ещё вдвое меньше баллов. РИНЦ позволяет проследить изменение общего КБПР организации (суммарного и по отраслям знаний) с 2011 по 2020 годы.
Цена самой статьи при расчёте КБПР сильно зависит от квартиля журнал: публикация в журнале первого квартиля WoS стоит 20 баллов, в Q2 — 10 баллов, в Q3 — 5 баллов, в Q4 — 2,5 балла, в остальном ядре РИНЦ (остальных журналах WoS, Scopus, RSCI без квартиля) цена статьи составляет 1 балл. РИНЦ позволяет увидеть, как менялся по годам средневзвешенный импакт-фактор журнала, в котором опубликованы статьи данной организации, но не предоставляет информацию о квартилях журналов. Поэтому для анализа нам была необходима простая связь между импакт-фактором журнала и его квартилем, а значит и стоимостью статьи по методике КБПР. Усреднение импакт-факторов журналов из разных областей показывает, что для естественных наук можно использовать приблизительную формулу:
[стоимость статьи по КБПР] = 4 * [импакт-фактор журнала],
причём в математических науках лучшее совпадение даёт коэффициент 5 вместо 4, в среднем по всем наукам — коэффициент 6. Мы отбрасываем журналы из списка ВАК, так как их вес в КБПР равен 0,12 балла, что не позволяет им заметно влиять на итоговую сумму КБПР при существующем распределении статей по категориям журналов.
Как же вычислить средний вклад вуза/НИИ в статью? Предположим, что за 2015 год организация набрала 1000 баллов КБПР, опубликовав 500 статей в ядре РИНЦ со средним импакт-фактором 2,5. Это означает, что 1 статья принесла данному заведению 1000/500 = 2 балла. Но полная стоимость статьи с таким импакт-фактором составляет 10 баллов (по формуле 4*2,5; получилось, что в среднем авторы публикуются в Q2). Следовательно, средняя доля организации в статьях составляет 2/10 = 20%.
Эмпирическая проверка показывает, что оценка хорошо работает для организаций естественнонаучного профиля, со средним импакт-фактором статей больше единицы. В случае общественного или гуманитарного профиля или при среднем импакт-факторе статей < 0,5 формула может завышать "коэффициент самостоятельности". При расчётах для единообразия результатов всюду применялся коэффициент 4, коррекция коэффициента (6 вместо 4) применялась только для ВШЭ, у которой заметно доминируют публикации по общественным и гуманитарным наукам.
Также РИНЦ предоставляет статистику распределения статей данной организации по числу соавторов, что позволяет найти среднее число соавторов в статье (статьи в мега-коллаборациях были исключены из рассмотрения). Умножая его на найденный выше коэффициент самостоятельности, мы получаем среднее число сотрудников из данной организации, участвующих в одной публикации. Если оно ниже единицы, например равно 0,5 или 0,33, значит в среднем в статье участвует один автор, который указывает 2 или 3 места работы соответственно.