Scientometrics — a need or a fashionable trend?

Full Text

Введение

Изучение количества и качества научных работ является одной из актуальных тем в современной научной среде. Ни для кого не секрет, что наука — это своего рода творчество, в котором каждый отдельно взятый ученый выступает уникальным творцом. Посему люди науки издавна ставили нетривиальную задачу — организовать ту или иную систему оценки научной деятельности. Технический прогресс стал одним из движущих факторов развития науки во всем мире. В настоящее время количество людей, занимающихся наукой в том или ином ее проявлении, стремительно растет. Все это способствовало созданию и развитию такого научного направления, как наукометрия.

Прежде чем ответить на главный вопрос: что же такое наукометрия — необходимость или же модная тенденция, следует сделать краткий экскурс в историю возникновения и становления наукометрии.

В 1969 г. отечественный ученый В.В. Налимов впервые ввел термин «наукометрия» и дал ему определение: «количественные методы изучения развития науки как информационного процесса» [1, 2].

Условно можно выделить три этапа развития наукометрии в мире.

1. Период до 1955 г., когда анализ публикаций не производился как таковой. В какой-то мере это связано с количеством ученых в тот период — по отношению к населению доля ученых была ничтожно мала.
2. Период так называемых индексов цитирования. В 1955 г. Ю. Гарфилд опубликовал научную работу Citation indexis for science, в которой первым затронул вопрос об индексах научного цитирования. Спустя 8 лет, в 1963 г., Институтом научной информации (англ. Institute for Scientific Information — ISI) был сформирован первый в мире индекс цитирования (SCI), который получил стремительное развитие. К 1965 г. существовала возможность просматривать около 1150 научных журналов, а к концу 70-х годов XX в. наукометрия была признана отдельным научным направлением. В последующие годы несколько аналогичных систем появилось в таких странах, как Китай, Япония, Польша и др. [3, 4].
3. Современный этап развития наукометрии начинается с 1990 г., когда была создана первая современная масштабная база данных Web of Science. Спустя 14 лет, в 2004 г., заработал еще один крупный международный сервис цитирования под названием Scopus. В ответ на разработку двух крупнейших иностранных сервисов цитирования в России в 2005 г. был создан отечественный сервис — Российский индекс научного цитирования (РИНЦ), реализуемый научной электронной библиотекой eLIBRARY [4].

Цель — провести обзор публикаций по теме наукометрии для поиска ответа на главный вопрос настоящей статьи — что же такое наукометрия: необходимость или же модная тенденция?

Материалы и методы

Авторами был проведен обзор публикаций, размещенных в научной электронной библиотеке eLIBRARY, за период с 2003 по 2020 г., а также ряда статей из других электронных ресурсов. Для исследовательского поиска были использованы следующие ключевые слова: «наукометрия», «индекс Хирша», «G-индекс», «индекс цитирования», «импакт-фактор».

За последние годы разработано множество факторов оценки научной результативности как отдельных авторов, так и целых научных изданий. Среди наиболее популярных методов оценки качества научных публикаций выделяют индекс Хирша (H-индекс), G-индекс, импакт-фактор и др. Индекс Хирша вычисляют по списку публикаций, расположенных по мере уменьшения количества их цитирования, он равен числу, являющемуся порядковым номером публикации в этом списке, для которой количество ее цитирований не меньше чем порядковый номер [5]. Приведем пример. У ученого А. есть 30 публикаций. Его наиболее цитируемая работа имеет 30 цитирований, вторая — 25 цитирований… 8-я публикация в общем списке имеет 10 цитирований (количество цитирований в этом случае больше, чем порядковый номер публикации), а 9-я — 7 цитирований (число цитирований данной публикации уже меньше, чем ее порядковый номер в списке). Соответственно, 8-я по счету публикация является последней публикацией, число цитирований у которой выше, чем ее порядковый номер. Таким образом, индекс Хирша ученого А. составляет 8.

Импакт-фактор — показатель, отражающий частоту цитирования статей научного журнала за определенный период. Чаще всего оценивают частоту цитирования публикаций за два года. Например, на 2019 г. импакт-фактор одного из самых авторитетных международных медицинских журналов The Lancet составлял 59,1 [6, 7].

Результаты

На сегодняшний день наукометрия обладает целым рядом возможностей. В первую очередь это система контроля публикационной активности ученых во всем мире. Кроме того, данные о цитировании позволяют узнать о новых разработках в той или иной сфере, своевременно выявить как «трендовые», так и затухающие направления. Очевидно, что основная целью состоит в структуризации научных публикаций с последующим повышением эффективности научной деятельности. Однако остро стоит вопрос, являются ли современные наукометрические показатели объективными по отношению не только к количеству, но и к качеству научных публикаций [6].

Говоря о методах оценки качества научных публикаций, в первую очередь следует упомянуть индекс Хирша. Отношение ученых к индексу Хирша весьма неоднозначное. Многие утверждают, что нельзя считать H-индекс достоверной единицей измерения активности авторов. Если у двух авторов одинаковое число публикаций, например 5, но у первого автора на каждую публикацию приходится 1000 цитирований, а у второго — 10, то все равно индекс Хирша у обоих авторов равен 5 [8, 9]. Показательным примером может служить учение А. Эйнштейна. Всем известно, что он автор теории относительности, и многие люди в той или иной мере употребляют в повседневной жизни фразы «все относительно» или «теория относительности», тем самым цитируя А. Эйнштейна. Однако сколько бы тысяч, миллионов раз ни цитировалась эта работа, индекс Хирша будет равен единице, поскольку публикация всего одна.

Среди недостатков индекса Хирша выделяют также невозможность оценки личного вклада отдельного автора, то есть не важно, писалась ли статья одним автором или же десятью, — индекс Хирша для всех авторов одинаков. H-индекс также не учитывает ссылки на книги и другие публикации, не являющиеся статьями в журналах [9].

В качестве альтернативы индексу Хирша было предложено использовать G-индекс, который позволяет оценивать не только количество цитирований отдельных статей, но и весь объем цитирований, но этот индекс не получил полноценного признания и повсеместного распространения [5].

Нельзя не отметить низкий рейтинг цитируемости российских публикаций в общемировой массе научных работ. Ряд авторов указывают на катастрофически низкий рейтинг цитируемости российских работ в международных базах (Web of Science, Scopus). Так, И.А. Меркулов приводит нерадующие цифры: «Россия занимает 120-е место в мире по количеству ссылок на одну опубликованную статью» [10]. По данным Ю.В. Мохначевой и Т.Н. Харыбиной, «ни в одной научной области средний уровень цитируемости российских публикаций не достиг среднемировых значений» [11].

Один из факторов, служащих причиной низкого рейтинга цитируемости российских публикаций на мировой арене, — это недостаточное знание английского языка (ведь статьи на английском языке обязательны для публикации в авторитетных базах данных Web of Science и Scopus) [2, 12]. Показательно в этом плане исследование О.И. Кирчика, в котором автор оценивал долю русскоязычных публикаций в базе данных Web of Science в разные годы. Так, в 1992 г. количество русскоязычных публикаций составляло около 10 тыс., тогда как к 2008 г. их доля уменьшилась до 2 тыс. Число англоязычных работ, напротив, увеличилось с 15 до 30 тыс. публикаций за тот же период [2, 13].

Еще одной причиной низких показателей цитируемости русскоязычных научных работ в мире является низкое качество многих российских журналов. Здесь также следует упомянуть о колоссальном количестве журналов-однодневок в структуре РИНЦ [8].

Многие авторы [2, 14, 15] акцентируют внимание на прямой корреляции между качеством проведенных исследований и их финансированием. Упоминая, в частности, что для исследований в области медицины необходимы немалые финансовые затраты.

В России существуют четыре крупные государственные организации, выделяющие гранты для исследований. Среди них:

• Российский фонд фундаментальных исследований (РФФИ), который на 2016 г. располагал 16 млрд руб.;
• Российский научный фонд (РНФ) — 15,5 млрд руб.;
• Российский гуманитарный научный фонд (РГНФ) — 1,8 млрд руб.;
• Российская академия наук (РАН) — 4,1 млрд руб. [14].

Помимо указанных грантодателей ряд организаций получает особое финансирование из государственного бюджета. Среди них такие организации, как Федеральное агентство научных организаций (ФАНО), Московский государственный университет (МГУ), Санкт-Петербургский государственный университет (СПбГУ) и т. д. Нельзя также забывать о грантах Президента и Правительства РФ и о частных инвестициях, хотя их вклад в общий бюджет невелик [14].

По данным на 2016 г., Россия занимает десятую строчку в общем рейтинге внутренних затрат на исследования среди различных стран, располагая бюджетом в 39,9 млрд долларов. В тройку лидеров входят США (511,1 млрд долларов), Китай (451,2 млрд долларов), Япония (168,6 млрд долларов). При этом на одного исследователя в России выделяется 93 тыс. долларов, что соответствует 47-й позиции. В США на каждого исследователя было выделено 359,9 тыс. долларов (2-е место), в Китае — 266,6 тыс. долларов (8-е место), в Японии — 253,4 тыс. долларов (9-е место) [16]. При подсчете количества публикаций за 2016 г. вышеуказанные страны расположились следующим образом: Китай — 426 165 статей (1-е место), США — 408 985 статей (2-е место), Япония — 96 536 статей (6-е место), Россия — 59 134 статей (10-е место) [17].

Таким образом, финансовая сторона играет не последнюю роль в проведении качественных и полноразмерных исследований.

Проанализировав множество работ, посвященных различным методам оценки публикационной активности представителей науки, можно сделать вывод, что бóльшая часть авторов негативно относится к наукометрии, считая ее необъективной в том смысле, что основная суть ее сводится к количественным методам оценки активности научных сотрудников и преподавательского состава. Кроме того, авторы указывают на множество отрицательных последствий влияния наукометрии на оценку научной активности. Все чаще отмечают применение наукометрии в недобросовестных целях: это и заказные публикации, и «накрутка» цитирований, и колоссальное количество научных работ, лишенных всякого смысла, и публикация перефразированных работ одними и теми же авторами, так называемые публикации ради публикации, а также прочие методы публикационного мошенничества [18, 19]. Нельзя не сказать о таком известном способе увеличения количества публикаций, как вписывание множества авторов, которые зачастую не имеют отношения к этой научной работе. Вот что об этом пишет профессор С.М. Гусейн-Заде: «…я кликнул на одну из статей. То, что я увидел, меня озадачило. Статья длиной 18 страниц с половиной. Четыре из них — непосредственно текст статьи, половина страницы — список литературы, а остальные 14 страниц — список авторов! Их немногим более 2000. (Получается, что на каждого автора приходится по 4 буквы собственно статьи.)» [20].

Многие ученые негодуют: их активность оценивают по «сырым» цифрам, вместо того чтобы оценивать качество той или иной научной работы. Если несколько десятилетий назад ученым требовалось несколько лет для написания и публикации качественной научной работы, то сейчас многие деятели науки «штампуют» статьи одну за другой, тем самым пытаясь выполнить план по публикациям за определенный промежуток времени, при этом совершенно забывая о качестве этих публикаций. И этому не стоит удивляться, ведь на кону надбавки, гранты, а зачастую и должности — все это зависит от количества опубликованных работ, цитирований, того же индекса Хирша [8].

Одним из факторов, приводящим к недостоверной оценки цитируемости публикаций тех или иных авторов, является так называемая компьютерная неграмотность, которая заключается в неверном цифровом отображении ссылки на статью. Ведь стоит допустить ошибку лишь в одном символе в фамилии автора, названии статьи, названии журнала или даже странице — и это приводит к тому, что данная ссылка не будет достоверной [19].

Еще один способ повышения индекса цитируемости — «перекрестные ссылки», суть которых заключается в том, что авторы договариваются между собой о том, чтобы в своих публикациях ссылаться друг на друга, а зачастую и вовсе занимаются самоцитированием [9].

Тем не менее не может не радовать то, что в последние годы российская наука стремится повысить качество публикаций. Таким образом, повысились требования к публикациям во многих журналах, в том числе из перечня журналов, рекомендуемых Высшей аттестационной комиссией при Министерстве науки и высшего образования Российской Федерации (ВАК). Кроме того, в 2018 г. была создана комиссия по противодействию фальсификации научных исследований РАН. В январе 2020 г. комиссией был проведен анализ множества публикаций в журналах ВАК. По результатам этой «ревизии» 869 статей были изъяты из РИНЦ в больше степени по причине того, что эти публикации оказались перефразированными работами одних и тех же авторов, так называемым самоплагиатом. Всего же комиссия РАН рекомендовала исключить более 2,5 тыс. статей [21, 22].

Таким образом, можно говорить о том, что вместо ожидаемого развития науки наукометрический бум приводит по большей части к развитию «псевдонауки». Как следствие, в научном обществе термин «наукометрия» вызывает неоднозначную, а зачастую и негативную реакцию [2].

Заключение

Обзор множества работ, посвященных различным методам оценки публикационной активности преподавателей и деятелей науки, позволяет заключить, что вопрос о том, являются ли наукометрические методы оценки объективными как в количественном, так и в качественном отношении, остается открытым. И главное не ясно, действительно ли необходима наукометрия в современном научном мире или же это очередное «модное» веяние. Отвечая на последний вопрос, можно провести параллели между научной деятельностью и спортивными состязаниями: здесь присутствуют как индивидуальные достижения, так и командная работа. С учетом этого факта науке, как и любому виду спорта, необходимы меры оценки продуктивности. В качестве примера можно привести рейтинг Эло у шахматистов. Так и в научной среде — для оценки индивидуальных заслуг в настоящее время помогают индекс Хирша, G-индекс и другие, а для оценки командной работы служит, например, импакт-фактор.

Не секрет, что многие ученые, преподаватели и другие деятели науки отрицательно относятся к способам оценки научной активности, применяемым в наши дни. Наукометрия, располагающая современным арсеналом способов оценки публикационной активности, фактически является «рейтинговой гонкой» среди людей науки. Однако следует понимать, что при отсутствии других, более качественных методов оценки деятельности научных сотрудников нынешние наукометрические показатели являются вынужденной мерой. Таким образом, основное направление для развития и совершенствования наукометрии в наши дни заключается в разработке показателей, позволяющих дать качественную оценку публикаций научных сотрудников.

About the authors

Vyacheslav P. Zemlyanoy

North-Western State Medical University named after I.I. Mechnikov

Email: zeml.spb@mail.ru
ORCID iD: 0000-0003-2329-0023

doctor of science, professor, Head of the Department of Faculty Surgery named after I.I. Grekova

Russian Federation, Saint-Petersburg

Badri V. Sigua

North-Western State Medical University named after I.I. Mechnikov

Email: dr.sigua@gmail.com
ORCID iD: 0000-0002-4556-4913
SPIN-code: 5571-8893

doctor of science, professor of the Department of Faculty Surgery named after I.I. Grekova

Russian Federation, Saint-Petersburg

Vyacheslav A. Melnikov

North-Western State Medical University named after I.I. Mechnikov

Author for correspondence.
Email: melnikov.szgmu@yandex.ru
ORCID iD: 0000-0002-9723-0392
SPIN-code: 2793-3016

Clinical Resident of the Department of Faculty Surgery named after I. I. Grekov

Russian Federation, Saint-Petersburg

Nikolay G. Lyubimov

North-Western State Medical University named after I.I. Mechnikov

Email: nikolaya.lyubimov@yandex.ru

Студент 6 курса

Russian Federation, Saint-Petersburg

References

Supplementary files