МИРОВАЯ ПРАКТИКА ПРИМЕНЕНИЯ ИНДЕКСА ЦИТИРОВАНИЯ ПРИ ПРОВЕДЕНИИ И ОЦЕНКЕ

НАУЧНЫХ ИССЛЕДОВАНИЙ

ФЕВРАЛЬ 2011

ПАВЕЛ КАСЬЯНОВРЕГИОНАЛЬНЫЙ ПРЕДСТАВИТЕЛЬ, НАУЧНЫЕ ИССЛЕДОВАНИЯ

2 направления применения показателей научного цитирования• Практика проведения исследований

– Что уже было написано по исследуемой мной проблеме?

– Кто из исследователей этой проблемы наиболее авторитетен?

– Где мне опубликовать мою статью?

– и т.д.

• Управление научной деятельностью– Чего мы добились как исследовательская организация?

– В каких предметных областях мы наиболее успешны?

– Какие из наших учёных наиболее активны/ авторитетны/ эффективны?

– Как мы показываем себя в сравнении с нашими партнёрами или конкурентами?

– Какие из международных научных связей нам следует развивать в первую очередь?

– И т.д.

2

CITATION REPORT – КАЗАНСКИЙ ГОСУДАРСТВЕННЫЙ УНИВЕРСИТЕТ

3

ПОКАЗАТЕЛИ ЦИТИРОВАНИЯ КРУПНЕЙШИХ РОССИЙСКИХ ВУЗОВ

4

   Кол-во статей

Суммарное цитирование

Среднее цитирование

Индекс Хирша

1 МГУ 97115 520530 5.36 168

2 СПбГУ 29762 147175 4.95 95

3 НИЯУ МИФИ 8040 49663 6.18 82

4 СПб Политехнический Университет 7877 31191 3.96 61

5 Казанский Федеральный Университет 7590 30984 4.08 51

6 Новосибирский Гос. Университет 4873 24090 4.94 51

7 МФТИ 2668 14559 5.46 49

8 Южный Федеральный Университет 9684 33465 3.46 47

9 Уральский Федеральный Университет 4872 17835 3.66 42

10 МИСиС 4769 12738 2.67 41

Источник: Web of Science (with Conference Proceedings) по состоянию на 13.12.2010

КОНЦЕПЦИЯ ИНДЕКСА ЦИТИРОВАНИЯ• Идея впервые предложена Ю. Гарфилдом

– Science, 1955

• The Science Citation Index (1963)– Печатный SCI (1960-е)– Поиск в сети - SciSearch в 1970 – На компакт-дисках 1980х– Веб-интерфейс (1997) Web of Science

• Расширяющийся контент:– Social Sciences Citation Index (SSCI)– Arts & Humanities Citation Index (AHCI)

• Индекс цитирования – Изначально применялся для получения научной

информации– Развитие электронных средств связи и хранения

информации привели к возможности использовать эти данные для оценки результатов исследований

Thomson Reuters

• Создана 17го апреля 2008г. в результате слияния Thomson Corporation и Reuters Group PLC.

• “Thomson Reuters is the world’s leading source of intelligent information for businesses and professionals”

• Более 50,000 сотрудников

• Представительства в 93х странах мира

Более 3,500 клиентов Web of Science в 100 странах

Европа, Ближний Восток и Африка

2000+ клиентов в 50 странах

Северная Америка

760 клиентов в 2 странах

Латинская Америка

244 клиента в 12 странах Азия

353 клиента в 26 странах

Россия

237 клиентов

8

КАК ЭТО РАБОТАЕТ?1. По результатам

научных исследований учёный публикует статью в реферируемом научном журнале.

2. Информация из 12 000 научных журналов оцифровывается в единую базу данных

3. Для каждой статьи подсчитывается количество ссылок на неё в других статьях.

Основные пользователи информации о цитировании в научной организации

• Учёные/исследователи

• Сотрудники электронных библиотек

• Руководство/администрация

Цикл научных исследований

Что представляет собой индекс цитирования?

База данных реферативной информации из более чем 12 000 авторитетнейших научных журналов, учитывающая цитирование каждой статьи.

2004

Cited References

1974 1998

2000

1993

2003Times Cited

Related Records

2008

2008

19992002

2000

20002009

КАК РАБОТАЕТ МЕХАНИЗМ ЦИТИРОВАНИЯ

WEB OF SCIENCE – ФИЛЬТРАЦИЯ ПО ИСТОЧНИКАМ ФИНАНСИРОВАНИЯ

13

Финансирование исследований Казанского университета с 2008 г.

WEB OF SCIENCE – САМЫЕ РАННИЕ СТАТЬИ УЧЁНЫХ КГУ

Web of Science – панель Refine Results

• По предметной области

• По автору

• По названию журнала

• По конференции

• По институту

• И т.д.

16

WEB OF SCIENCE – ПОИСК ПО КЛЮЧЕВОМУ СЛОВУ - ГРАФЕН

EndNote Web

Journal Citation Reports

• импакт-фактор – показатель, рассчитываемый эксклюзивно в JCR

• Какие журналы действительно нужны библиотеке?

• “в каком журнале мне опубликовать мою статью?”

Категория: chemistry, mutidisciplinary

АНАЛИЗ ЦИТИРУЮЩЕГО МАССИВА ДАННЫХ

19

Продвижение результатов своей деятельности

• Публикация работы в индексируемом WoS журнале увеличивает потенциальную аудиторию на порядок, а иногда – не на один.

• ResearcherID– глобальное сообщество исследователей

– привязка статей к базе Web of Science

Цикл научных исследований

Web of Science для библиотекаря

• Какие журналы закупать библиотеке?

• Насколько часто читаются те или иные журналы?

В каких журналах публикуются наши учёные?

В каких журналах публикуются ссылки на них?

Journal Citation Reports

• Какие журналы действительно нужны библиотеке?

Категория: Физика твёрдого тела

Web of Science – привязка к полным текстам статей

ИСПОЛЬЗОВАНИЕ WEB OF SCIENCE НА УРОВНЕ РУКОВОДСТВА ОРГАНИЗАЦИИ• Сопоставление научных сотрудников:

– Отчёт по самым публикующимся авторам (производительность)

– Сопоставление их суммарной цитируемости и индексов Хирша (авторитетность или суммарный вклад в науку)

– Сопоставление их среднего цитирования (эффективность их исследований)

• Поиск наиболее авторитетных исследователей из других научных организаций

• Анализ цитирующего массива данных:– Кто цитирует нас (какие учёные, из каких организаций,

из каких стран)?

27

ИСПОЛЬЗОВАНИЕ WEB OF SCIENCE НА УРОВНЕ РУКОВОДСТВА ОРГАНИЗАЦИИ

• Сопоставление по предметным областям:– Сравнение результатов в конкретной дисциплине с

другими организациями России или мира;

• Анализ совместных исследовательских проектов– Какие из них ведутся наиболее активно?

– Какие из них являются наиболее результативными?

• Сопоставление журналов– В каких из них наши учёные публиковались чаще

всего?

– В каких журналах целесообразнее публиковать статьи?

28

Политика отбора журналов в Web of Science

• Для чего мы отбираем журналы?

Относительно небольшая группа журналов публикует абсолютное большинство значимых научных результатов

0

20

40

60

80

100

120

0 1000 2000 3000 4000 5000 6000

# of journals

% o

f dat

abas

e

Articles Citations

Всего 3000 журналов покрывает 80% статей…

…но, что ещё более важно – 92% того, что цитируется

В 7,621 журнале опубликовано 814,967 статей, получивших 20,834,641 ссылок4% журналов (300) публикуют 30% статей (239,206)4% журналов (300) получают 51% ссылок (10,681,596)

Политика отбора журналов в Web of Science

• Ежегодно рассматривается ~2000 журналов

– 10-12% принимается

• Эксперты Thomson Reuters– Профессионалы информационного бизнеса

– Библиотекари

– Эксперты в конкретной предметной области

Web of Science

Рассматриваемые журналы

«Качество» журнала

По каким критериям оцениваются журналы?

• Редакционная политика– Соблюдает ли журнал сроки выхода?

– Каков состав редакционной коллегии?

– Как поставлен процесс реферирования статей?

• Язык реферативной информации– журнал НЕ обязан быть англоязычным

– необходимо наличие реферативной информации на английском языке

• Цитирование– Как журнал цитируется в других изданиях?

• Насколько журнал расширит наше существующее информационное наполнение?

32

Оценка исследований на уровне института

Источник: Thomson Reuters U.S. and Canadian University Science Indicators

Объёмы цитирования североамериканских институтов

СПЕЦИАЛИЗИРОВАННОЕ РЕШЕНИЕ ДЛЯ УПРАВЛЕНИЯ НАУКОЙ - INCITES

34

Кто является самым «продуктивным» автором?

35

Кто из учёных - самый авторитетный?

36

У кого из учёных самый высокий импакт статей?

37

Как можно сравнить «физиков» с «лириками»?

38

С кем мы сотрудничаем?

39

Какие из этих совместных проектов были наиболее успешными?

40

В какой предметной области мы показываем себя лучше?

41

Физическая химия

Науки о вычислительной технике

На 41% ниже среднего

На 220% выше среднего

ИНТЕГРАЦИЯ С РЕПОЗИТАРИЕМ

42

ПОКАЗАТЕЛИ ЦИТИРОВАНИЯ НА УРОВНЕ ФАКУЛЬТЕТА

43

НОРМАЛИЗОВАННОЕ СРЕДНЕЕ ЦИТИРОВАНИЕ РОССИЙСКИХ СТАТЕЙ

44

Различные вопросы – различные показатели

Объект оценки Необходимые данныеОцениваемая

выборка

Производительность Количество публикацийАвтор, группа, организация

Общее влияниеОбъём цитирования Автор, группа,

организация

Индекс Хирша Автор, группа, организация

Непрямое влияние Объём цитирования "второго поколения"Автор, группа, организация

Эффективность

Средний объём цитирования на статью Автор, группа, организация

Соотношение процитированных/непроцитированных работ

Автор, группа, организация

Импакт-фактор Журнал

Относительный импакт

Среднее цитирование в предметной областиАвтор, группа, организация

Ожидаемое цитирование в журналеАвтор, группа, организация

Перцентили: статей, средние, относительныеАвтор, группа, организация

СпециализацияПоказатели коллаборации

Автор, группа, организация

Индекс Дисциплинарности Автор, группа, организация

Трендовый анализ Временные рядыАвтор, группа, организация

Как проводится оценка результатов научной деятельности?

• Комбинация различных методологий и подходов, например:– Количество и объём полученных грантов

– Количество наград (например, Нобелевских премий)

– Peer evaluation

– Подсчёт публикационной активности

– Подсчёт объёма цитирования

• Peer Evaluation - Дорого, субъективно, существенные временные затраты

• Ни один из этих показателей не работает идеально сам по себе, всегда есть «частные случаи» и необходима экспертная оценка для правильной интерпретации результатов

В ЗАКЛЮЧЕНИЕ

• Web of Science – авторитетнейший международный индекс научного цитирования

• С его помощью решаются не только и не столько вопросы отчётности, сколько:– вопросы оценки результатов и прогнозирования

развития института

– вопросы тематического информирования научных сотрудников

• Сегодня в России имеют доступ 220 институтов Академии Наук и 16 Университетов

47