Использование «Индексов цитирования» для оценки результативности научной деятельности Текст научной статьи по специальности «СМИ (медиа) и массовые коммуникации»

РАЗДЕ JI 2. ИНФОРМАЦИОННЫЕ ТЕХНОЛОГИИ В НАУЧНОЙ ДЕЯТЕЛЬНОСТИ

Р.С .Гил яр ев с кий

Использование «индексов цитирования» для оценки результативности научной деятельности

В ходе своего развития информационный менеджмент как деятельность и научная дисциплина об управлении людьми и их институтами при помощи информации добрался и до самого научного сообщества. В мире и у нас ищут пути количественной оценки и сравнения результативности научной деятельности ученых и их коллективов. При этом стремятся учитывать все виды научной работы и в первую очередь используют две сущности — научные публикации и библиографические ссылки на них (неверно называемые по-русски цитированием).

Министр образования и науки А.А. Фурсенко сказал в одном из своих интервью, что в стране «должен оцениваться уровень научных исследований, причем критерии хорошо известны в мировой науке. Среди них — число публикаций и индекс цитирования научных статей. В России объем ассигнований на науку за 8 лет вырос в 2 раза в сопоставимых ценах, но число публикаций снизилось с 18 тыс. до 14 тыс. в год. Доля публикаций российских ученых в мировой научной прессе — 2,4%, но по индексу цитирования мы стоим ниже — 0,85%. По числу публикаций российская наука находится на 9-м месте, по индексу цитирования — на 15-м. Но самый грустный показа— 120-

статью».

В 2006 г. в Российской академии наук (РАН) было введено понятие показателя результативности научной деятельности (ПРНД) для стимулирования активности научных работников и руководителей. Индивидуальный ПРНД научного работника предложено вычислять как сумму баллов за опубликование статей в отечественных и зарубежных журналах, имеющих индекс (показатель влиятельности = Impact factor) не менее 0,2, и в других журналах, сборниках. Учитывается авторство в монографиях и учебных пособиях, а также другие виды научной работы (подготовка кандидатов наук, участие в конференциях, разработка научно-обр^овательных курсов лекций и т.п.). Отдельно оговаривается начисление баллов за индекс цитирования (т.е. число библиографических ссылок на труды) научного работника.

Распространенная оценка продуктивности научной деятельности основывается на абсолютных показателях общего числа опубликованных научных работ и/или библиографических ссылок на них. Однако такая оценка, как

© Един ер И. Г

правило, носит односторонний характер. Общее число статей в действительности оценивает лишь публикационную активность научного работника, но не учитывает значимости публикаций, того информационного вклада, который они вносят в науку. Общее число ссылок на работы автора не учитывает возможности большого числа ссылок только на некоторые из его работ, написанные притом в соавторстве. Этот показатель дает неоправданный приоритет цитируемым обзорным работам перед исследовательскими. В этих случаях показатель также не оценивает реального вклада ученого в науку.

Чтобы устранить указанные ограничения, можно считать только число

,

числа ссылок на них. Но такой критерий произволен и субъективен, поскольку он должен быть разным в разных науках и для разных возрастных катего-.

,

предыдущего. Кто и как будет устанавливать порог наибольшей цитируемо -сти?

Американский физик Дж. Хирш предложил показатель, лишенный этих недостатков, который теперь называют его именем. Индекс Хирша — это показатель достижений ученого за определенное время, измеряемый числом статей, получивших такое же число ссылок. Сам он сформулировал это так:

Ученый имеет индекс ^ если h его N статей имеют, по меньшей мере, h ссылок каждая, а каждая другая из статей — К) имеет не более чем h ссылок).

Другими словами, если у ученого есть 10 статей, каждая из которых получила по 10 ссылок, а все остальные получили меньше 10 ссылок, то его Ъ = 10, а если он опубликовал 100 статей, каждая из которых получила по одной ссылке, то его Ъ = 1. Предложение Дж. Хирша вызвало много откликов, среди которых были и критические. В частности, было обращено внимание на то, что по его определению индекса Ъ возникают случаи, когда этот индекс невозможно подсчитать. Примером может служить следующая таб.

Публикации Число ссылок

А 5

В 3

С 3

D 3

Е 1

Легко видеть, что в этом случае индекс не равен 3, поскольку есть публи-, . признание самим Дж. Хиршем ограниченности своего индекса (он не учитывает соавторства и различий практики цитирования в разных областях зна-

), .

Индексы цитирования могут относительно адекватно отражать результативность научной деятельности, если они опираются на объективную выборку журналов. Хотя самые известные из них Science Citation Index фирмы Thomson Scientific и Scopus фирмы Elsevier претендуют на международность, первый из них отражает мнение и практику американских, а второй — евро. -

ности российских ученых необходимо дождаться полной готовности Нацио-

( ) , -

ся с 2005 г. Научной электронной библиотекой (НЭБ) по контракту с Федеральным агентством по науке и инновациям в качестве головного исполните. — -сийских научных изданий. Вход в РИНЦ бесплатный: достаточно пройти персональную регистрацию на eLIBRARY. Сейчас РИНЦ уже «расписывает»

более 1 тыс. отечественных журналов из примерно 3 тыс. существующих.

, ,

формулирует следующим образом:

• создание многоцелевой поисковой системы по публикациям россий-

, -

учных журналов;

• разработка механизмов и инструментария для статистического анализа

;

• создание и формирование Единого реестра публикаций российских ученых (ЕРНП), авторитетной базы данных, представляющей максимально полную и достоверную информацию о публикационном потоке российских ученых, независимо от источника, времени, места и типа публикации;

• создание эффективной системы нави гации в массиве научной информации и обеспечение доступа российским пользователям к полным текстам публикаций через механизмы системы унифицированного доступа.

Другой участник проекта РИНЦ основные возможности указателя видит в количественной и качественной оценке публикационной деятельности ученых и журналов, а именно:

• оценке научной деятельности отдельных ученых, научных коллективов,

, -

ского анализа публикаций; РИНЦ — составная часть комплексного ПРНД;

• оценке значимости и востребованности научных журналов, расчет им-пакт-факторов изданий;

• подсчете персонального индекса цитирования за определенные годы. Среди возможностей Единого реестра публикаций российских ученых он

также называет на первом месте фискальные функции:

• занесение в реестр библиографической информации о публикациях

, ;

• расчет ПРНД для отдельного научного работника, научной организации, структурного подразделения организации;

• экспорт информации о результатах научной деятельности из ЕРНП для составления отчетов, подготовки новых публикаций и т.д.

Названный проект является не единственной отечественной инициативой по созданию указателя библиографических ссылок. Другим подобным проектом является Указатель Российского фонда фундаментальных исследований (РФФИ). Начиная с 1992 г. РФФИ является основной организацией, финансирующей фундаментальные научные исследования на конкурентной основе. Источником данных для Указателя РФФИ является база данных, в которой содержится информация о поданных конкурсных заявках на исследовательские проекты и результатах их выполнения. За период 1993-2005 гг. в эту базу поступили почти 100 тыс. заявок на выполнение научных проектов. Около 30 . .

выполнения процитировано более 480 тыс. публикаций (библиографические описания, рефераты, а с 2001 г. и содержащиеся в публикациях ссылки). В отличие от РИНЦ в этом указателе учитываются и иноязычные публикации (около 40% от общего числа). Почти половину вводимых публикаций составляют журнальные статьи. Общее число отечественных и зарубежных журналов, в которых публикуются эти статьи, превышает 5 тыс. наименований, из которых 40% представлены в Journal Citation Report (JCR) фирмы Thomson Scientific.

, ,

показатели значимости (влиятельности) и быстроты отклика (оперативности) научных журналов, получивших названия Impact factor и Immediacy index. Влиятельность конкретного журнала в определенном году вычисляется как отношение числа ссылок этого года в других журналах на статьи нашего журнала, опубликованные за два предыдущих года, а оперативность — на , . комплектование периодики научных библиотек и ПРНД ученых, публикующих статьи в журналах.

Введенные в JCR показатели «Impact factor» и «Immediacy index» являются тонкими количественными оценками научного статуса журнала, отражающими качество работ, публикуемых в журнале, через оценку двух аспектов журнала — продуктивности (числа опубликованных в нем работ) и цитируемое™ (количества ссылок на него, т.е. его научной популярности).

Impact factor -

ла (обозначим его If), который рассчитывается как отношение числа ссылок, которые получил журнал в текущем году на статьи, опубликованные в этом журнале в предшествующие два года, к числу статей, опубликованных в этом журнале в эти же два предшествующих года. Поясним это примером. Американский социологический журнал «American Journal of Sociology» получил в 2002 . 2599 ; ,

этом журнале в 2001 и 2000 гг., составило соответственно 73 и 120; число статей, опубликованных в журнале в эти годы, соответственно равно 61 и 72. Следовательно, показатель влиятельности равен:

73 + 120 If =- = 1,451.

61+72

Таким образом, показатель влиятельности I/является мерой, определяющей частоту, с которой цитируется среднецитируемая статья журнала. Реально в JCR этот показатель рассчитывается по данным предшествующих двух лет и отражает, насколько актуальны научные работы, опубликованные в конкретном журнале в течение последних двух лет.

Дело в том, что высокие (абсолютные и относительные) показатели цитирования журнала не всегда отражают реальную картину актуальности ра, . за счет цитирования одной важной статьи, опубликованной в журнале 5-10 лет назад, в то же время показатель влиятельности //более динам ичен и отражает использование статей журнала научным сообществом в последние . . журнала («Квантовая электроника», «Успехи физических наук» и «Журнал технической физики») получили в 1982 г. соответственно 2053, 1625 и 1428 . : 0,706

(« »), 1,814 (« ») 0,277

(« »).

число статей было опубликовано в 1980-1981 гг. в журнале «Успехи физических наук» — 896, а показатель влиятельности этого журнала был наиболь-.

/mmediacy index можно рассматривать как показатель быстроты отклика ( /i). -лок, полученных журналом на статьи текущего года, к числу статей, опубликованных в нем в том же году. Например, журнал «American Journal of Sociology» в 2002 г. получил 13 ссылок на статьи, опубликованные в 2002 г.; общее число статей, опубликованных в журнале в 2002 г., было равно 53. Сле-,

13

I, = — = 0,245.

53

Для журнала «Научно-техническая информация» (серия 1 и 2) эти показатели соответственно равны: 0,012 и 0,038. |

, 2002 . 2 больше работ 2002 г., чем из серии 1 того же журнала. Показатель быстроты отклика на журнал / является мерой скорости, с которой появляются ссылки на среднецитируемую статью журнала текущего года.

Любые количественные показатели при оценке научной деятельности могут служить лишь формальными данными для содержательной интерпретации, поскольку они не учитывают индивидуальных особенностей мыслительной работы ученого и национальных традиций сложившейся системы информационной коммуникации. Вместе с тем, эти данные позволяют корректировать субъективную оценку значимости отдельных ученых, научных коллективов и даже сравнивать интеллектуальную деятельность разных .

Литература

1. Известия. — 2006. — 14 августа.

2. Об утверждении видов, порядка и условий применения стимулирующих выплат, обеспечивающих повышение рез. наук: Приказ Минобрнауки России, Минздравсоцразвития России, РАН № 273/745/68 от 03 ноября 2006 .

3. Хирш,Дж. Индекс для количественной оценки научно-

/ . // . информ. и документации. — 2007. — Т. 32, № 1. — С. 3-7.

4. Руссо,Р . Новые разработки относительно индекса Хирша / Р.Руссо // Ме-ждунар. форум по информ. и документации. — 2007. — Т. 32, № 2. — С. 7-9.

5. Бардин,С. Живая машина по имени РИНЦ [Элек^юнный ресурс]. — [Режим доступа] www.izvestia.ru/science/article3108072 — 07.09.2007.

6. Писляков,В.В. Российский индекс научного цитирования: pro et contra /

В.В.Писляков // Международная конференция НТИ-2007: Информацион-

, , -

: , 24-26 2007 . .

— М.: ВИНИТИ, 2007. — С. 243-244.

7. Еременко, Т.О. Разработка Российского индекса научного цитирования (РИНЦ): Первые результаты и перспективы развития / Г.О.Еременко // Международная конференция НТИ-2007: Информационное общество, интеллектуальная обработка информации, информационные технологии:

, 24-26 2007 . . — .: ,

2007. — С. 120-121.

8. Еременко, Г.О. Единый реестр научных публикаций (ЕРНП) как механизм формирования базы данных по научным публикациям российских авторов

/ Г.О.Еременко // Международная конференция НТИ-2007: Информаци-

, , -

: , 24-26 2007 . -

ции. — М.: ВИНИТИ, 2007. — С. 121-122.

9. Указатель РФФИ как инструмент информационного поиска и анализа тенденций в фундаментальной науке России / А.Н. Либкинд, В .А. Минин, И. А. Либкинд и др. // Там же. — С. 180-183.