CC BY
28ДИСКУССИЯ: ПРОБЛЕМЫ И ПЕРСПЕКТИВЫ НАУКОМЕТРИИ В СОВРЕМЕННЫХ УСЛОВИЯХ
DOI: 10.19181/smtp.2023.5.3.3 EDN: QNGEID
ОПРЕДЕЛЕНИЕ ОФИЦИАЛЬНОГО КВАРТИЛЯ ЖУРНАЛА В SCOPUS: ПОЧЕМУ ИСПОЛЬЗОВАНИЕ ПОКАЗАТЕЛЯ SJR НА ПОРТАЛЕ SCIMAGO НЕУМЕСТНО
Мжельский Александр Анатольевич1
1 Независимый исследователь, Москва, Россия
Для цитирования: Мжельский А. А. Определение официального квартиля журнала в Scopus: почему использование показателя SJR на портале SCImago неуместно // Управление наукой: теория и практика. 2023. Т. 5, № 3. С. 31-40. DOI 10.19181/smtp.2023.5.3.3. EDN QNGEID.
АННОТАЦИЯ
Существует несколько метрик для подсчёта журнальных квартилей на разных платформах. Официальной метрикой для определения журнальных квартилей в базе данных Web of Science является Impact Factor, для Scopus - CiteScore. Квартиль журналов на платформе SCImago формируется на основе метрики SJR (которая рассчитывается по иной методике, чем CiteScore), а также данных, несколько отличающихся от данных Scopus. Более того, в SCImago квартили присваиваются даже журналам, исключённым из Scopus из-за недобросовестности. По этой причине квартили SCImago не совместимы с официальными квартилями Scopus. Для получения актуального значения CiteScore и рассчитанного на основе этой метрики квартиля журнала в Scopus следует использовать именно эту базу данных, которая в бесплатной версии Preview предоставляет такую возможность по каждому отдельному журналу, а также спискам всех предметных коллекций.
КЛЮЧЕВЫЕ СЛОВА:
SCImago, SJR, Scopus, журнальный квартиль, библиометрия, научная политика, наукометрия
КОНФЛИКТ ИНТЕРЕСОВ
Автор ранее получал вознаграждения за консультации от российского журнала Annals of Critical Care, а также являлся главой регионального подразделения Elsevier (разработчика и владельца базы Scopus) и регионального отдела Thomson Reuters (разработчика и владельца базы Web of Science).
1.ВВЕДЕНИЕ
В последнее десятилетие информационное сопровождение исследований и оценка научной деятельности в России во многом основывались на двух коммерческих международных базах данных - Web of Science и Scopus [1]. При этом российские научные журналы в основном оценивались по их «квар-тильности» в данных базах от Q1 до Q4: чем меньше цифровой индекс Q, тем лучше журнал [2]. Несмотря на принятый в марте 2022 года Правительством России мораторий на учёт зарубежных библиометрических показателей1, квартиль журнала остаётся востребованным показателем на всех уровнях и в 2023 году.
К сожалению, в отношении квартилей журналов, проиндексированных в Scopus, порой используется неуместная практика подмены официального значения квартиля в этой базе данных (на основе CiteScore) на квартиль с испанского портала SCImago (на основе SJR). Квартили журналов с этих двух платформ часто не совпадают не только по причины разной методики подсчёта, но и разных исходных данных между SCImago и Scopus.
Несмотря на завершение доступа в России к базе данных Scopus в конце 2022 г., бесплатная версия Scopus Preview прекрасно продолжает предоставлять информацию о квартилях журналов, как и прежде платная [3]. Однако, в отсутствии официального списка (ранее предоставляемого российским офисом Elsevier) квартилей российских журналов, проиндексированных в Scopus, для некоторых российских чиновников стало непросто искать отдельно каждый журнал в бесплатной версии Scopus Preview и переводить указанные там процентили в квартили. В результате SCImago стал для них инструментом выбора для определения квартилей в Scopus, несмотря на объективную недопустимость такого подхода [4].
2. РАЗНИЦА МЕЖДУ КВАРТИЛЯМИ В SCIMAGO И SCOPUS В ТЕОРИИ
Для подсчёта квартиля журналов в SCImago используется показатель SJR, а в Scopus - CiteScore. При этом квартили журналов (позиция журнала в предметном списке) формируются на основе совершенно разных списков (напр., в списках SCImago фигурируют журналы, исключённые из Scopus за недобросовестность) [5].
Что касается разницы в методике подсчёта метрик SJR и CiteScore, то она не только в том, что в SJR учитывается влиятельность ссылок (т. е. ссылка из престижного журнала имеет больший вес, чем ссылка из менее престижного). Практически по всем, казалось бы, сходным параметрам в SJR и CiteScore существуют значительные отличия — по временному охвату (как по годам, так и по месяцам последнего года), типам и количеству цитируемых и цитирующих документов (включая самоцитирование). Для понимания подобных различий обратимся к тому, как формируются эти показатели, а на их основе — квартили журналов.
1 В России введён мораторий на показатели по публикациям учёных в зарубежных журналах // Ведомости: [сайт]. 21.03.2022. URL: https://www.vedomosti.ru/society/news/2022/03/21/914514-moratorii-na-pokazateli-po-publikatsiyam (дата обращения: 04.09.2023).
2.1. CITESCORE (НА WWW.SCOPUS.COM)
Эта метрика показывает среднюю цитируемость публикации за 4 предыдущих полных календарных года. Среди цитируемых и цитирующих документов выбираются только 5 типов: оригинальное исследование, обзор, материал конференций, глава книги, исходные исследовательские данные.
Показатель обновляется ежегодно в июне (напр., в июне 2023 г. появляется CiteScore 2022).
Методика расчёта CiteScore прозрачна и легко воспроизводима из доступных данных даже в бесплатной версии Scopus Preview для каждого отдельного журнала.
Квартиль журнала определяется в каждой предметной категории (где заявлен журнал) исключительно среди журналов, включённых в базу данных Scopus, на основе ранжирования показателя CiteScore.
2.2. SJR (НА WWW.SCIMAGOJR.COM)
Данная метрика показывает средневзвешенную нормализованную цитируемость статьи в зависимости от «престижности» цитирующих источников. Более того, вес ссылок определяется также тематической близостью исходного журнала и цитирующих источников: если они где-то цитируются вместе в одной публикации, то вес ссылок возрастает. При этом самоцитирование журнала учитывается лишь частично (примерно на 33%) [6, с. 229].
Публикационное окно составляет 3 года, а окно цитирования — один последний год. Учитывается только 3 типа публикаций: оригинальное исследование, обзор (включая short survey) и материалы конференций [7]. Метрика обновляется ежегодно в апреле из базы Scopus (за 2 месяца до ежегодного обновления данных в Scopus). Приводимые данные для расчёта SJR на SCImago - количественные и не дают возможности полноценной валидации SJR.
Квартиль журнала определяется в каждой предметной категории на основе ранжирования журналов по метрике SJR.
2.3. РАЗНИЦА В ПРЕДМЕТНЫХ СПИСКАХ ДЛЯ ОПРЕДЕЛЕНИЯ КВАРТИЛЯ
Предметные списки SCImago (на основе которых определяется квартиль журналов) значительно отличаются от списков Scopus как по количеству, так по составу и качеству контента. Несколько примеров различий приведено ниже:
■ на 2023 г. в Scopus представлены 333 предметные категории (см. файл для загрузки на странице Scopus Contact)2, а в SCImago - 3093;
■ в списках SCImago присутствуют наименования журналов, исключённых из Scopus за недобросовестность, но которые учитываются при расчёте SJR (тем самым сдвигая ранг «добросовестных» журналов);
■ у некоторых журналов предметные области в SCImago иные, чем в Scopus.
2 Elsevier: [сайт]. URL: https://beta.elsevier.com/products/scopus/content7triaNtrue (дата обращения: 04.09.2023).
3 Help // SJR [сайт]. URL: https://www.scimagojr.com/help.php (дата обращения: 04.09.2023). Управление наукой: теория и практика ■ Том 5, № 3. 2023.
Эти и другие несоответствия по фактической базе для калькуляция журнальных квартилей в SCImago рассмотрены детально ниже.
3. РАЗНИЦА МЕЖДУ КВАРТИЛЯМИ В SCIMAGO И SCOPUS НА ПРАКТИКЕ
3.1. ФАКТОР ЭМБАРГО ДАННЫХ
Хотя разница в ежегодном обновлении SCImago всего на 2 месяца раньше может показаться малозначительной, на практике это имеет множество «осложнений», которые сохраняются весь год до следующего обновления, а в ряде случаев и несколько лет.
Дело в том, что все ключевые изменения в журнале (его название, предметные области и т. п.) фиксируются в Scopus лишь один раз в год (в июне) и у журнала есть всего 6 недель, согласно политике Scopus (примерно до августа), чтобы внести возможные правки с момента объявления ежегодного CiteScore. Соответственно, подобные изменения июня (а также возможные правки до августа) никак не попадут в обновления SCImago в апреле.
Например, если журнал будет проиндексирован в Scopus в мае, то, скорее всего, он не попадёт в SCImago до апреля следующего года.
Также если, согласно политике Scopus, журнал подаст до апреля заявку на изменение предметной области или издательства, то и это не отразится в апрельских обновлениях SCImago нынешнего года, а появится лишь в следующем апреле.
С другой стороны, важно помнить, что контент с сайтов журналов Scopus «собирает» примерно раз в 7 недель и, с учётом задержки многими издательствами размещения номеров прошедшего года вплоть до весны следующего, Scopus обновляет ежегодные данные (включая CiteScore) лишь летом, а не весной. На практике это означает, что в апрельском обновлении SCImago могут оказаться данные, «собранные» на сайте журнала лишь в феврале. Тогда, соответственно, окно разрыва данных между Scopus и SCImago будет составлять уже не два, а около четырёх месяцев.
3.2. ПРИМЕРЫ НЕСООТВЕТСТВИЯ ДАННЫХ МЕЖДУ SCOPUS И SCIMAGO
Хотя в данной статье не ставилась цель показать и объяснить причины различия данных между Scopus и SCImago, ниже — несколько примеров, которые раскрывают вопрос несовместимости квартилей между рассматриваемыми платформами из-за несоответствия исходных данных и списков, в которых формируется квартильное ранжирование.
■ Data in Brief. Журнал нового поколения, отвечающий современным тенденциям и требованиям по производимости исследований, открытости и доступности исследовательских данных4 [8], в котором публикуются исключительно исходные научные данные (тип статьи,
4 Transparency & best practice // DOAJ: [сайт]. URL: https://doaj.org/apply/transparency/ (дата обращения: 04.09.2023).
принимаемый для расчёта квартиля в CiteScore и не принимаемый в SJR). Согласно статистике SCImago5, за 3 года (2020-2022) в этом журнале вышли 3839 статей, из которых для расчёта SJR были приняты лишь 6 оригинальных исследований. Для сравнения: в Scopus за этот период числится 3873 статьи, которые все (кроме двух редакционных) пошли в калькуляцию CiteScore 2022 (где в результате добавления документов за 2019 г. числится 5108 статей)6. Таким образом, база подсчёта метрики SJR 2022 (6 документов за 3 года) и CiteScore 2022 (5108 документов за 4 года) отличается в 851 раз. Более того, журнал в Scopus индексируется только в одной предметной ка-тегории7, а в SCImago — дополнительно во второй (что соответственно сдвигает там ранг других журналов).
■ Anaesthesiology and Intensive Care. Журнал был исключён из Scopus в прошлом году (летом 2022)8. Однако он продолжает числиться в SCImago в двух предметных категориях в Q49, внося тем самым несоответствие в список для формирования квартилей. Более того, при отсутствии всяких цитат за последние 3 года он демонстрирует положительную метрику престижности источников цитирования (SJR=0,100), превышая на несколько позиций в предметной категории Anesthesiology and Pain Medicine ранг журнала Journal of Japanese Dental Society of Anesthesiology (имеющий 3 цитирования за этот период), что может создавать дополнительное ложное впечатление об авторитетности данных двух изданий.
■ Critical Care Explorations. Журнал числится в конце Q4 в Scopus на основе CiteScore (ранг 95/100)10, а в списке SCImago на основе ранжирования по его метрике SJR=0,22 он находится на вершине Q3 (ранг 64/108)11.
■ Reviews of Adhesion and Adhesives. Согласно CiteScore 2022, журнал числится в Scopus во всех четырёх предметных категориях в Q212, а на основе ранжирования по SJR 2022 в тех же категориях на SCImago его квартиль Q313.
5 Data in Brief // SJR: [сайт]. URL: https://www.scimagojr.com/journalsearch.php?q=21100372856&tip=sid&cle an=0 (дата обращения: 04.09.2023).
6 Data in Brief // Scopuc Preview: [сайт]. URL: https://www.scopus.com/sourceid/21100372856#tabs=0 (дата обращения: 04.09.2023).
7 Data in Brief // Scopuc Preview: [сайт]. URL: https://www.scopus.com/sourceid/21100372856 (дата обращения: 04.09.2023).
8 Anaesthesiology and Intensive Care // Scopuc Preview: [сайт]. URL: https://www.scopus.com/sourceid/21438 (дата обращения: 04.09.2023).
9 Anaesthesiology and Intensive Care // SJR: [сайт]. URL: https://www.scimagojr.com/journalsearch. php?q=21438&tip=sid&clean=0 (дата обращения: 04.09.2023).
10 Critical Care Explorations // Scopuc Preview: [сайт]. URL: https://www.scopus.com/sourceid/21101092741 (дата обращения: 04.09.2023).
11 Critical Care Explorations // SJR: [сайт]. URL: https://www.scimagojr.com/journalsearch.php?q=21101092741& tip=sid&clean=0 (дата обращения: 04.09.2023).
12 Reviews of Adhesion and Adhesives // Scopuc Preview: [сайт]. URL: https://www.scopus.com/ sourceid/21100417465 (дата обращения: 04.09.2023).
13 Reviews of Adhesion and Adhesives // SJR: [сайт]. URL: https://www.scimagojr.com/journalsearch. php?q=21100417465&tip=sid&clean=0 (дата обращения: 04.09.2023).
3.3. АНАЛИЗ НЕСООТВЕТСТВИЯ КВАРТИЛЕЙ РОССИЙСКОГО ЖУРНАЛА ANNALS OF CRITICAL CARE
Российский журнал по интенсивной терапии Annals of Critical Care (ISSN 7269806), согласно своей редакционной политике14, рассматривает не только вопросы неотложной медицинской помощи, реанимации и анестезиологии, но также многие нормативно-правовые и юридические аспекты (от уголовных преследований реаниматологов до коллизий с физическими средствами удержания пациентов) [9; 10]. Именно по всем этим предметным категориям (включая Law) журнал был принят в Scopus в феврале 2022 г., ежемесячно наращивал показатель CiteScore Tracker (ежемесячно обновляемый справочный индикатор, который к весне обычно совпадает со значением, определяемым на весь последующий год), а с июня 2023 г. на основе CiteScore 2022 получил в Scopus по ним заслуженно высокий квартиль Q2 и Q315. Однако во всех указанных предметных категориях, согласно ранжированию SJR 2022, в SCImago журналу присвоен квартиль Q416. При этом в SCImago журнал был ошибочно проиндексирован в предметной категории Emergency Medicine вместо Emergency Medical Services (которая также представлена на этой платформе).
Выявленная разница данных между Scopus и SCImago в отношении квартиля журнала Annals of Critical Care представлена детально в таблице 1.
Таблица 1
Разница данных между Scopus и SCImago в отношении квартиля журнала Annals of Critical Care*
Показатели/ платформа SCOPUS SCImago
Значение показателя для расчёта квартиля CiteScore 2022 = 1,1 SJR 2022 = 0,130
Общее количество документов за 3 года (20202022) 133 144
Общее количество цитат за 3 года (2020-2022) 193 76
Ранг показателя / квартиль в Law (344/885) / Q2 (641/855)/ Q4
Ранг показателя / квартиль в Emergency Medical Services (Scopus) и Emergency Medicine (SCImago) (4/8) / Q2 (Emergency Medical Services) (87/101) / Q4 (Emergency Medicine)
Ранг показателя / квартиль в Critical Care and Intensive Care Medicine (60/100) / Q3 (94/107) / Q4
Ранг показателя / квартиль в Anesthesiology and Pain Medicine (79/124) / Q3 (108/130) / Q4
*Данные из открытые источников: SCImago (URL: https://www.scimagojr.com/journalrank. php?category=2706&page=2&total_size=108) и Scopus (URL: https://www.scopus.com/ sourceid/21101073950#tabs=2)
14 Цели и предметно-тематическая область // Вестник интенсивной терапии имени А. И. Салтанова: [сайт]. URL: https://intensive-care.ru/index.php/acc/aims-and-scope (дата обращения: 04.09.2023).
15 Annals of Critical Care // Scopuc Preview: [сайт]. https://www.scopus.com/sourceid/21101073950?origin=resul tslist (дата обращения: 04.09.2023).
16 Annals of Critical Care // SJR: [сайт]. URL: https://www.scimagojr.com/journalsearch.php?q=21101073950&tip =sid&clean=0
С одной стороны, выявленное несоответствие квартилей журнала Annals of Critical Care свидетельствует о недопустимости использования метрик SJR на SCImago для определения журнального квартиля в Scopus.
и w
С другой стороны, может сложиться ложное впечатление, что низкий показатель SJR корректен и лишь отражает неавторитетность цитирующих источников (следовательно, низкую авторитетность самого журнала). Ложность подобной гипотезы можно проверить, проведя валидацию количественных данных для расчёта искомого значения SJR. Эти данные также представлены в таблице 1. По ним видно, что изначальное значение общего количества цитат (без вычета самоцитирования журнала и пр.) за 3 года отличается от данных Scopus в 2,5 раза. Подобное различие возможно объяснить фактором эмбарго данных (напр., на дату ежегодного обновления данных SCImago весной из Scopus там ещё не были «собраны» все цитаты за указанный период). В любом случае, без должного анализа метрики SJR по ней может сложиться ложное мнение об авторитетности журнала.
4. ЗАКЛЮЧЕНИЕ
Бесплатная платформа SCImago, официально использующая данные Scopus, предлагает удобный интерфейс и возможности для анализа журнальных показателей. Однако указанные в ней журнальные квартили не всегда соответствуют официальным в Scopus из-за разных методик подсчёта и иных причин, рассмотренных в статье, и могут различаться в несколько раз.
Для определения корректных журнальных квартилей Scopus следует пользоваться именно этой базой данных. Бесплатная версия Scopus Preview предлагает возможности поиска журнала, просмотр источников по всем предметным категориям, все исходные данные по калькуляции CiteScore каждого наименования, а также его процентиля в каждой заявленной предметной области (и многое другое).
Безусловно, использование Scopus Preview для определения журнального квартиля требует ручного перевода процентиля в квартиль, и такую ситуацию могли бы при желании изменить многие известные российские организации (государственные, общественные или коммерческие), имеющие возможность и статус публиковать корректные квартили Scopus.
Как справедливо отмечено в «Онлайн-руководстве по наукометрии» Ивана Стерлигова [5], «SJR на SCImago, и особенно квартили на его основе, следует использовать с осторожностью». Из приведённых в статье примеров выше видно, что этот показатель рассчитывается даже для журналов, исключённых из Scopus за недобросовестность, а им на SCImago продолжают присваивать квартили многие годы, даже несмотря на отсутствие цитирования последние 3 года.
СПИСОК ИСТОЧНИКОВ
1. Гуреев В. Н. Возрастание роли открытых библиографических данных в условиях ограничения доступа к коммерческим информационным системам / В. Н. Гуреев, Н. А. Мазов // Управление наукой: теория и практика. 2023. Т. 5, № 2. С. 49-76. DOI 10.19181/smtp.2023.5.2.4. EDN CXJUHG.
2. ЦветковаВ. А. Российские научные журналы в структуре оценок исследовательских процессов / В. А. Цветкова, Ю. В. Мохначева // Управление наукой: теория и практика. 2023. Т. 5, № 2. С. 77-88. DOI 10.19181/smtp.2023.5.2.5. EDN DLZDZU.
3. Мохначева Ю. В. Практическое руководство с методическими рекомендациями по использованию бесплатных сервисов Web of Science и Scopus / Ю. В. Мохначева, Г. В. Калашникова. М. : БЕН РАН, 2023. 32 с.
4. Мжельский А. А. Маргинализация российской науки. Что ожидать российским издательствам и авторам // Управление наукой: теория и практика. 2022. Т. 4, № 3. С. 35-43. DOI 10.19181/smtp.2022.4.3.3
5. Онлайн-руководство по наукометрии // ВШЭ : [сайт]. URL: https://sciguide.hse. ru/sources/ (дата обращения: 04.09.2023).
6. Руководство по наукометрии: индикаторы развития науки и технологии. Авторы: М. А. Акоев, В. А. Маркусова, О. В. Москалева, В. В. Писляков [под. ред. М. А. Акоева]. Екатеринбург : Издательство Уральского университета, 2021. 358 с.
7. Guerrero-Bote V. P. A Further Step Forward in Measuring Journals' Scientific Prestige: The SJR2 Indicator / V. P. Guerrero-Bote, F. Moya-Anegón // Journal of Informetrics. 2012.
8. Мжельский А. А. Воспроизводимость исследований и доступ к их исходным данным. Интерпретация международных рекомендаций и обзор лучших журнальных политик и практик // Научный редактор и издатель. 2022. Т. 7, №2. С. 143-165. DOI 10.24069/ SEP-22-53.
9. Нормативно-правовое регулирование ошибок и осложнений в анестезиологии-реаниматологии в Российской Федерации: обзор литературы / В. И. Горбачев, Е. С. Нетесин, М. Ю. Итыгилов [и др.] // Вестник интенсивной терапии имени А. И. Салтанова. 2022. № 4. С. 83-100. DOI 10.21320/1818-474X-2022-4-83-100. EDN CUHHGX.
10. Аналитический обзор по уголовным делам против врачей анестезиологов-реаниматологов за последние пять лет / В. И. Горбачев, Е. С. Нетесин, А. И. Козлов [и др.] // Вестник интенсивной терапии им. А. И. Салтанова. 2020. № 1. С. 19-24. DOI 10.21320/1818-474X-2020-1-19-24.
Статья поступила в редакцию 24.07.2023.
Одобрена после рецензирования 05.09.2023. Принята к публикации 08.09.2023.
СВЕДЕНИЯ ОБ АВТОРЕ
Мжельский Александр Анатольевич [email protected] Независимый исследователь, Москва, Россия ORCID: 0000-0001-7601-7106
DOI: 10.19181/smtp.2023.5.3.3
DETERMINING OFFICIAL SCOPUS JOURNAL QUARTILE: WHY SCIMAGO SJR IS NOT APPROPRIATE
Alexander A. Mzhelsky1
1 Independent Researcher, Moscow, Russia
For citation: Mzhelsky, A. A. (2023). Determining Official Scopus Journal Quartile: Why SCImago SJR Is Not Appropriate. Science Management: Theory and Practice. Vol. 5, no. 3. P. 31-40. DOI 10.19181/smtp.2023.5.3.3.
Abstract. There are several metrics for calculating journal quartiles across different platforms in science. The official metric for determining journal quartiles in the Web of Science database is Impact Factor, and for Scopus it is CiteScore. The quartiles for the journals on the SCImago platform are formed based on the SJR metric (which is calculated with a different methodology than CiteScore). Moreover, the data used on SCImago and Scopus are slightly different. SCImago also assigns quartiles even to journals excluded from Scopus. For this reason, SCImago quartiles are not appropriate for substituting official Scopus quartiles. To obtain the correct Scopus values anyone should use this database, which even in the free Preview version provides such opportunity.
Keywords: SCImago, SJR, Scopus, journal quartile, misuse, science policy, bibliometrics
Conflict of interest. The author was remunerated for his consulting from Annals of Critical. Care and served for Elsevier and Thomson Reuters.
REFERENCES
1. Gureev, V. N. and Mazov, N. A. (2023). Increased Role of Open Bibliographic Data in the Context of Restricted Access to Proprietary Information Systems. Science Management: Theory and Practice. Vol. 5, no. 2. P. 49-76. DOI 10.19181/smtp.2023.5.2.4 (In Russ.).
2. Tsvetkova, V. A. and Mokhnacheva, Y. V. (2023). Russian Scientific Journals in the Structure of Research Process Assessments. Science Management: Theory and Practice. Vol. 5, no. 2. P. 77-88. DOI 10.19181/smtp.2023.5.2.5 (In Russ.).
3. Mokhnacheva, Yu. V. and Kalashnikova, G. V. (2023^. Prakticheskoe rukovodstvo s metodicheskimi rekomendatsiyamipo ispol'zovaniyu besplatnykh servisov Web of Science i Scopus [A practical guide with methodological recommendations on the use of free Web of Science and Scopus services]. Moscow: Library for Natural Science RAS. 32 p. (In Russ.).
4. Mzhelsky, A. A. (2022). Marginalizing Russian science. What to expect for Russian publishers and authors. Science Management: Theory and Practice. Vol. 4, no. 3. P. 35-43. DOI 10.19181/smtp.2022.4.3.3. (In Russ.).
5. Online guide to scientometry. HSE. URL: https://sciguide.hse.ru/sources/ (accessed: 04.09.2023). (In Russ.).
6. Akoev, M. A., Markusova, V. A., Moskaleva, O. V. and Pislyakov, V. V. (2021). Handbook for Scientometrics: Science and Technology Development Indicators. Ed. by M. A. Akoev. Ekaterinburg: Izdatelstvo Uralskogo universiteta. 358 p. (In Russ.).
7. Guerrero-Bote V. P. and Moya-Anegón F. (2012). A Further Step Forward in Measuring Journals' Scientific Prestige: The SJR2 Indicator. Journal of Informetrics.
8. Mzhelsky A. A. (2022). Data and reproducibility. Interpretation of international guidelines and journals' best policies and practices. Science Editor and Publisher. T. 7, № 2. P. 143-165. DOI 10.24069/SEP-22-53 (In Russ.).
9. Gorbachev, V. I., Netesin, E. S., Itygilov, M. Yu. [et al.] (2022). Legal regulations of errors and complications in anesthesiology and intensive care in Russian Federation: a review. Annals of Critical Care. No. 4. P. 83-100. DOI 10.21320/1818-474X-2022-4-83-100. (In Russ.).
10. Gorbachev, V. I., Netesin, E. S., Kozlov, A. I. [et al.] (2022). Analytical review on criminal cases against doctors anesthesiologists-reanimatologists for the last five years. Annals of Critical Care. No. 1. P. 19-24. DOI 10.21320/1818-474X-2020-1-19-24. (In Russ.).
The article was submitted on 24.05.2023. Approved after reviewing 05.09.2023.
Accepted for publication 08.09.2023.
INFORMATION ABOUT THE AUTHOR Mzhelsky Alexander [email protected]
Independent Researcher, Moscow, Russia ORCID: 0000-0001-7601-7106
