September 12, 2021

"MATEC умер, да здравствует E3S" Как это повлияло на рейтинг THE?

По результатам последнего рейтинга THE некоторые российские университеты продемонстрировали стремительный рост и ворвались в мировую повестку.

Относительно причин такого успеха широкая дискуссия разразилась в "либеральном" крыле российского фейсбука и телеграма.

Благодаря выгрузке публикаций ДГТУ из SciVal удалось определить основные конференции, которые дали наибольший прирост: кроме издания IOP, особенно выделяется E3S Web of Conference.

При переходе на сайт сборника можно увидеть объявление о вариантах размещения материалов любой конференции вашего университета в одном из сборников. Среди выбора есть известный российской публике MATEC Web of Conferences (Рис.1), который в свое время был исключен из базы данных Scopus.

Рис.1 Страница выбора сборника конференций

На главной странице сказано, что заказчик берет на себя ответственность за рецензирование статей (и даже дает инструкцию, как это сделать), а издательство берет на себя обязательство, что все статьи будут проверены на плагиат (рис.2).

E3S Web of Conferences индексируется в Scopus с 2013 г. До 2017 г. ежегодно в его сборниках публиковалось менее 1000 материалов конференций. Однако в период 2018-2020 гг (рис.4). количество ежегодных публикаций резко увеличилось с 3800 до 8800. К сентябрю 2021 г. цифра уже перевалила за 7200 публикаций.

Исходя из описанного выше, в E3S Web of Conferences возникают две ключевые проблемы:

  1. Раздувание количества публикаций в сборнике (не совсем добросовестная практика)
  2. Отсутствие какого-либо контроля за рецензированием
Рис.4 Количетсво публикаций в E3S Web of Conferences

Times Higher Education

При расчете показателя цитируемости (FWCI) в рейтинге THE учитываются цитаты 2016‑2021 гг., полученные на публикации 2016-2020 гг., относящиеся к следующим типам: Article, Review, Conference Paper, Book, Book Review в базе данных Scopus.

Показатель FWCI (Field-Weighted Citation Impact ― приведенный по отраслям уровень цитируемости) ― это отношение суммарного количества цитирований, фактически полученных работами всех представителей категории, и общего количества цитирований, ожидаемого исходя из среднего показателя для соответствующей отрасли знания. (https://service.elsevier.com/app/answers/detail/a_id/19270/supporthub/scopus/)

Важно понимать, что цитаты, которые пришли на "молодые" публикации, имеют больший вес для показателя FWCI. Обычно цитирование публикаций приходит через достаточно продолжительное время.

Основная проблема заключается в учете публикаций типа Conference Paper, места в которых, согласно информации выше, можно купить в любой момент времени.

ДГТУ

Последние 3 года в ДГТУ происходит значительное увеличение количества публикаций типа Conference Paper (рис.5).

Рис.5 Распределение публикаций ДГТУ

Основное количество публикаций в 2020 г. приходится на журнал E3S Web of Conferences, который также дает значительный вклад в показатель FWCI. Согласно приведенным ниже данным, публикации в этом сборнике цитируются на 376% лучше, чем в среднем в мире в соотвествующих областях (рис.6).

Рис. 6 Распределение публикаций типа Conference Paper в 2020 г.

Благодаря open-access и экселю мы может посмотреть внутрь двух самых массовых для ДГТУ сборников E3S Web of Conferences и провести анализ топ-3 наиболее цитируемых публикаций:

175 сборник (XIII International Scientific and Practical Conference “State and Prospects for the Development of Agribusiness – INTERAGROMASH 2020”)

109 публикаций

Конференция проходила на базе ДГТУ 23-25 февраля 2020 г.

В сборнике выделяются 3 публикации с наибольшей цитируемостью:

Рис. 7 Наиболее цитируемые публикации в 175 сборнике

Цитирование данных публикаций приходится на 35 материалов конференций. В 2020 - 13; в 2021 - 22.

Из них 25 цитирующих документов также приходятся на E3S Web of Conferences:

  • 273 сборник (2021) процитировал данные публикации в 17 документах
  • 210 сборник (2020) процитировал данные публикации в 7 документах

Наибольшее количество цитирующих документов также приходится на ДГТУ - 30.

Конференция из 273 сборника также проходила на базе университета 26-28 февраля 2021 г.

210 сборник (Innovative Technologies in Science and Education (ITSE-2020)

206 публикаций

19-30 августа 2020 г.

В сборнике выделяются 3 публикации с наибольшей цитируемостью:

Рис.8 Наиболее цитируемые публикации в 210 сборнике

Цитирование данных публикаций приходится на 24 материала конференций в 2021 г.

Из них все 24 цитирующих документа приходятся на E3S Web of Conferences на 273 сборник (2021).

Наибольшее количество цитирующих документов также приходится на ДГТУ - 20.

Конференция из 273 сборника также проходила на базе университета.

Выводы

  • Показатель рейтинга THE увеличивается за счет самоцитирования в материалах конференций, которые проходили в самом университете;
  • Основная механика показателя распространяется и на другие статьи, в данном случае топ-3 оказался примером того, как работает данный механизм;
  • Сенситивность показателя FWCI к цитированиям "молодых" статей стремительно увеличивает его рост;
  • Такие источники как E3S Web of Conferences скорее всего будут исключены из базы данных Scopus, и позиции отдельных университетов в рейтинге THE значительно упадут;
  • У данной истории будет продолжение в октябре, когда выйдут предметные рейтинги Times.

Что еще можно посмотреть?

  • Распределение цитируемости в источнике
  • Определенные паттерны цитирования авторов
  • Другие университеты из топ-5 по цитируемости в РФ