Ирина Разумова Консорциум НЭИКОН [email protected] Вятка, ВятГУ, октябрь 2009

Вятка, оетябрь 2009

Ирина РазумоваКонсорциум НЭИКОН

[email protected]

Вятка, ВятГУ, октябрь 2009

Рейтинги университетов.Что это? Зачем они?

Какие и сколько?


Ирина РазумоваКонсорциум НЭИКОН

[email protected] Online в Крыму, июнь

2009

Международные и национальные рейтинги университетов как механизм оценки научной

деятельности: альтернатива или дополнение

к индексам цитирования?


Владимир Владимирович Писляковк.ф.-м.н.

зам. директора по управлению электронными ресурсамиБиблиотека ГУ-ВШЭ

http://[email protected]

SCIENCE ONLINE: электронные информационные ресурсы для науки и образования Мармарис, 2009

СИСТЕМА СИСТЕМА БИБЛИОМЕТРИЧЕСКИХ БИБЛИОМЕТРИЧЕСКИХ ИНДИКАТОРОВ ВУЗОВИНДИКАТОРОВ ВУЗОВ

Как внедрить и не навредитьКак внедрить и не навредить


Владимир Владимирович Писляковк.ф.-м.н.

зам. директора по управлению электронными ресурсамиБиблиотека ГУ-ВШЭ

http://[email protected]

День SCIENCE ONLINE на Крымской конференции Судак, 2009

А У ВАС СПРАШИВАЛИА У ВАС СПРАШИВАЛИ

СРЕДНИЙ ИНДЕКС ЦИТИРОВАНИЯ ? ?

Как правильно задать этот Как правильно задать этот вопросвопрос

и проанализировать ответы и проанализировать ответы вузоввузов


Почему вдруг? Письмо о ФОТ и индикаторе, 17 октября 2009 г. В связи с постановлением Правительства Российской Федерации

от 5 августа 2008 г. № 583 и требованиями Федерального

агентства по образованию по порядку и выполнения работ по

распределению централизованной части фонда оплаты труда

(далее - ФОТ), все университеты должны представлять

информацию по следующему индикатору

http://www.kpmo.ru/kpmo/info/nsotdocs.html


Зачем? Чтобы делить деньги. Бегущая строка на сайте...Внимание!!! Всем федеральным

учреждениямнеобходимо заполнить данные,

необходимые дляраспределения Рособразованием

централизованной частиФОТ до 1 декабря 2008 г


Что нас спросили?(письмо № 2527/12-16 от

17.11.2008)

• «Средний индекс цитирования у преподавателей вуза» (п. 8)

• «Количество работающих в вузе профессоров, находящихся на основной работе в другом вузе, имеющих индекс цитирования, больший, чем в п. 8» (п. 10)


Что мы переспросили?• Основываясь на какие документы и пр. можно приводить

данные по п. 8 «Средний индекс цитирования у преподавателей вуза» (и 10, соответственно).

• Что такое цитирования у преподавателей?

• Исчисляется ли средний индекс цитируемости преподавателей вуза самим вузом или же необходимо за основу взять соответствующую информационную базу, в которой указаны наиболее цитируемые авторы. Какая эта база?

• Средний индекс цитирования у преподавателей вуза: Как его рассчитать?

Данные про индекс цитирования заполняются в том случае, если имеются сведения о международном индексе (Шанхайский, Таймс)



Указывать данные, только если есть сведенияпро международный ИЦ (шанхайский, Таймс)


А дальше определение забыто. Кроме того появляется упоминание о рейтингах…«При расчёте индексов

цитирования необходимо брать данные о международных индексах цитирования (Шанхайский, Таймс). При их наличии.»


Что же такое индикаторы, индексы цитирования, и рейтинги ?

Под индексом цитирования понимается база данных…

Полнейшая абракадабра. Поэтому начнем еще раз…


Какие бывают базы....Продовольственная Военная база – база – там лежит там военныепродовольствие

Индексы цитирования: там лежат статьи и цитаты на них. Российская база– РИНЦ, международные: Web of Science, Scopus, Google Scholar


Какую информацию можно получить из этих баз, то

есть, индексов цитирования ?

Данные по публикационной активности

Данные по цитированию публикаций


На основании этих данных расчитываются индикаторыИндикаторы – это цифры. Они бывают разныеи используются, например, в:

Системе распределения ЦТ ФОТ

Национальных системах аттестации университетов и НИИ

а также для

Определения рейтингов


…so much for that.

Что необходимо указать в методологии для получения

внятного библиометрического индикатора?• Базу данных, по которой ведется подсчет

• Тип(ы) публикаций, которые учитываются• Временной промежуток-1: когда выходят

оцениваемые публикации• Временной промежуток-2: на каком интервале

времени учитывается цитирование оцениваемых публикаций

• Календарное время (месяц) предоставления индикатора для отчета вуза


Отступление простоео временных промежутках

Только годы и только календарные!

(так устроены БД цитирования)

Вопрос М.В. Кузнецовой: «Данные по научной деятельности предоставляются в Рособразование по календарному году. Сведения по объемам НИР за указанный период можно, конечно, вычленить, но ни одному официальному документу они соответствовать не будут. Как быть?»

— «Все данные должны быть предоставлены за отчетный период»


Отступление напрасноео терминологии

Как называть показатель цитирования?

• индекс цитирования?результат неверной кальки с английского: «citation index» — это база данных, а не показатель; + почему суммарный, валовой показатель стал «индексом»?

• в зависимости от того, что оцениваем:— цитируемость (суммарная), число цитирований, число ссылок;— средняя цитируемость статьи, число ссылок на статью;— импакт-фактор (для журналов).


Наше предложение1. основной индикатор

• База данных: Web of Science (документы: SCIE+SSCI, цитирования из всей базы)

• Тип(ы) публикаций: все, с дополнительным выделением Article+Review+Proceedings Paper

• Сколько публикаций вышло за последние5 лет (2004–2008)

• Сколько цитирований они получили за те же самые 5 лет (2004–2008)

• Считать не ранее сентября следующего за учитываемым интервалом года


Наше предложение2. «оперативный» индикатор• База данных: Web of Science (SCIE+SSCI)• Тип(ы) публикаций: все, с дополнительным

выделением Article+Review+Proceedings Paper• Сколько публикаций вышло за последний год

(2008)• Средний («средневзвешенный») импакт-

фактор журналов, в которых выходили эти публикации (IF-2008)

• Считать не ранее июля следующего года


Самое сложное в анализе — кроссдисциплинарное сопоставление

• Сравнение с цитируемостью на статью для вузов той же дисциплинарной направленности

• Сравнение с цитируемостью, например, всех российских ученых (желательно работающих в той же отрасли)

• Для оперативного индикатора — сравнение со средним (или медианным) импакт-фактором журналов той же дисциплины


Письмо 2008 г. о распределении ЦЧ ФОТ

Данные о количестве публикаций в Российских изданиях учитывают только публикации в ваковских изданиях.

Индикатор - количество цитирований сотрудников вуза в двух международно признанных индексах цитирования Science Citation Index Expanded и Social Sciences Citation Index, входящие в состав базы данных Web of Science (WoS).


Письмо от 17 октября 2008 года и показатели цитируемости ВУЗов. Как их надо считать? …


• Какие параметры (индикаторы) будем

определять ?

• По какому источнику будем считать?

• Какие публикации будем рассматривать ?

• За какое время будем считать?

Вопросы


• Будем подсчитывать число статей, опубликованных в

ВУЗЕ и число цитат, полученных на эти статьи.

• Индикаторы будем определять по данным базы Web

of Science (SCIE, SSCI).

• Будем учитывать все публикации в журналах WoS и

полученные цитирования за 5 истекших лет.

Ответы


число статей, опубликованных в ВУЗЕ за 5 истекших лет и число цитат, полученных на эти статьи.

Внимание! Нельзя определять полное число статей за все годы и

отсортировать их по годам. В этом случае вы получите

данные о числе статей, появившихся в базе в таком-то году, а

не число опубликованных в этом году статей.

Нельзя получить данные о цитировании всех статей

организации и отсортировать цитаты по годам. Вы получите

данные о цитировании в таком-то году ВСЕХ статей

организации. А надо данные о цитировании статей, вышедших

за 5 последних истекших лет.

Комментарии


Индикаторы будем определять по данным базы Web of Science (SCIE, SSCI).

Почему Web of Science ? Потому, что так считают во всем мире. Потому, что так просит Рособраз. Внимание! Нельзя использовать данные из Скопуса,

если требуются данные по Web of Science.Это разные базы с разными списками журналов. Причем

для многих издательств в Скопусе журналов расписывается больше, но для некоторых МЕНЬШЕ (AGU, MIT…)

Поэтому иногда индикаторы, расчитанные по Скопусу будут ниже (ЮФУ, ФТИ им Иоффе…)



Организация Scopus, все годы

WoS, 2000-2009

Ранг, Scopus

Ранг, WoS

МГУ 2664 2345 1 1

ФТИ им Иоффе 1107 1760 2 2

СПБГУ 770 944 3 3

Институт общей физики РАН 482 618 4 3

Институт физики полупроводников СО РАН 599 554 3 3

Институт кристаллографии им. Шубникова РАН 397 468 4 4

Институт проблем химической физики РАН 558 463 3 4

Институт катализа им. Борескова СО РАН 499 449 4 4

Институт физики твердого тела РАН 448 405 4 4

Институт неорганической химии СО РАН 259 348 5 4

Институт химической физики РАН 409 344 4 4

ГОИ им. С.И. Вавилова 323 319 4 4

РНЦ "Курчатовский институт" 293 280 5 5

Институт физики металлов УрО РАН 346 277 4 5

ОИЯИ, Дубна 260 231 5 5

Институт физической химии им. Карпова (ГНЦ) 244 204 5 5

Физический институт им. П.Н. Лебедева РАН 209 454 4 5


Индикаторы будем определять за 5 истекших календарных лет.

Почему 5 ? Потому, что за год считать бессмысленно, количество

цитат будет практически равно 0. Потому, что так считают в общепризнанной во всем

мире базе ESI. Почему календарных, а не учебных?Потому, что в WoS можно считать только по

календарным годам.Почему истекших?Потому, что некоторые статьи текущего года появятся в

базе в следующем году. Особенно это касается статей из российских журналов.



TS=((CU=Russia OR CU=(Russian Federation) OR CU=USSR)) and (ad= (St

PETERSBURG STATE UNIV) and (ad=Petersburg OR ad =(198504 OR

199034))) AND PY=2004-2008 Databases=SCI-EXPANDED, SSCI

Timespan=All Years.

5137



More options Analyse Results Create Citation Report

Author(s): Perepelkin KE, Makarova RA, Dresvyanina EN, et al.Source: FIBRE CHEMISTRY Volume: 40 Issue: 5 Pages:

406-414 Published: SEP 2008 .

5137



More options Analyse Results Create Citation Report

Author(s): Perepelkin KE, Makarova RA, Dresvyanina EN, et al.Source: FIBRE CHEMISTRY Volume: 40 Issue: 5 Pages:

406-414 Published: SEP 2008 .

5137



Спасибо за внимание

Ирина Разумова

консорциум НЭИКОНСанкт-Петербург

[email protected]

Documents

Ирина Разумова Консорциум НЭИКОН [email protected] Вятка, ВятГУ, октябрь 2009