Науковедение

Д.м.н. Бастрон А.С.., к.м.н. Глухова Е.А.

Первый Московский государственный медицинский университет, Россия

Сравнительная оценка аналитических инструментов для оценки деятельности на уровне научно-исследовательской организации

I. Введение

Новая реальность современной науки: пересечение национальных границ и юрисдикций; сетевое взаимодействие в реальном и виртуальном времени и пространстве; двойственность между конкуренцией и сотрудничеством; высокая мобильность ресурсов, идей, людей, инфраструктуры и технологий. Чтобы остаться в лидерах научно-исследовательской организации (далее организация) необходимо: определить и оценить свои сильные и слабые позиции; поддержать лучших сотрудников; определить баланс между конкуренцией и сотрудничеством; эффективно распределить ограниченные ресурсы.

Для оценки результативности и рейтинга научной деятельности организации требуется доступ к современным информационным ресурсам (индексам цитирования). Индексы цитирования – это базы данных, содержащие информацию о публикациях и их цитировании. У автора не может быть индекса цитирования, а может быть показатель цитируемости. Расчет показателей цитируемости в каждом конкретном ресурсе осуществляется на основе информации (источников), содержащейся именно в данном ресурсе, поэтому показатели цитируемости одного и того же автора в разных ресурсах могут различаться.

В настоящем исследовании оценены возможности аналитических ресурсов Российского научного индекса цитирования и Thomson Reuters, используемых для оценки публикационной активности и рейтинга организации, определения перспективных направлений работы и выбора профильных журналов для публикаций.

II. Постановка задачи

Цель работы – оценить возможности информационно-аналитического инструмента РИНЦ - Science Index и Thomson Reuters - Incites для анализа публикационной активности и рейтинга организации.

III. Результаты

Российский индекс научного цитирования (РИНЦ) - это реферативная и аналитическая база российских научных публикаций и цитирования.

Science Index – это аналитическая надстройка над базовым интерфейсом РИНЦ. Система Science Index рассчитана на научно-исследовательские организации, заинтересованные в систематизации и анализе публикационной активности своих сотрудников. Она позволяет проводить анализ публикационного потока и цитируемости публикаций как на уровне всей организации в целом, так и на уровне ее отдельных подразделений (отделов, лабораторий и т.д.) или сотрудников.

Для организаций в Science Index предусмотрена возможность не только уточнения информации о публикациях, уже имеющихся в РИНЦ, но и возможность добавления новых публикаций разных типов, отсутствующих в РИНЦ.

К основным библиометрическим показателям оценки научной деятельности организации относят: производительность (число публикаций на автора) и качество (количество цитат), соединение цитат и публикаций (индекс Хирша), импакт-фактор журналов, в которых опубликованы статьи, позиция в рейтинге российских научно-исследовательских организаций.

Основные возможности системы Science Index:

- просмотр списка публикаций организации в РИНЦ с возможностью его анализа по различным параметрам и вывода на печать;

- контроль и коррекция списка публикаций организации в РИНЦ;

- идентификация организации в публикациях в РИНЦ;

- добавление публикаций организации, отсутствующих в РИНЦ;

- добавление авторов, отсутствующих в авторском указателе РИНЦ;

- уточнение информации о сотрудниках в авторском указателе РИНЦ;

- возможность добавления не только статей в научных журналах, но и монографий, сборников статей, материалов конференций, патентов, отчетов и других типов научных публикаций;

- ввод структуры организации (отделы, лаборатории, факультеты, кафедры и т.д.) и распределение по ним сотрудников;

- анализ публикационной активности и цитируемости по подразделениям организации;

- оценка эффективности работы отдельных сотрудников с помощью широкого набора индикаторов;

- размещение в РИНЦ полных текстов публикаций и создание собственного электронного репозитария научных публикаций организации.

К преимуществам системы Science Index следует отнести:

- публикации, внесенные авторизованными представителями, попадают в базу данных РИНЦ и индексируются поисковыми машинами;

- расчет библиометрических показателей и построение аналитических отчетов не только для организации в целом, но и по отдельным подразделениям организации;

- все добавленные и измененные описания публикаций, внесенные представителями организаций, проходят контроль администраторами системы, что улучшает качество вводимых данных.

Основные рабочие модули системы:

- Структура организации (иерархическая структура подразделений организации позволяет приписывать сотрудников к конкретным подразделениям и анализировать их публикационную активность).

- Список сотрудников организации (список зарегистрированных в РИНЦ сотрудников организации по конкретным подразделениям, что позволяет проанализировать публикационную активность как отдельных пользователей, так и подразделений или организации в целом).

- Структура публикаций организации (список публикаций в РИНЦ, приписанных к организации).

- Публикационная активность организации (библиометрические показатели и статистические распределения публикаций и цитирований организации).

- Сравнение показателей структурных подразделений организации (сравнение библиометрических показателей, рассчитанных для подразделений организации).

- Поиск публикаций и цитирований в РИНЦ (поиск публикаций сотрудников организации, не показываемых в списках их публикаций и цитирований, например, из-за ошибки в написании фамилии или инициалов, и включения их в список публикаций организации).

- Добавление/изменение публикаций в РИНЦ (возможность добавления в РИНЦ библиографических описаний публикаций организации или внесения исправлений или добавлений в уже существующие в РИНЦ публикаций сотрудников).

Для оценки научно-исследовательской деятельности организации формируются следующие типы отчетов:

· Обобщенные (обзорные) отчеты по количеству публикаций и цитирований к ним, а также по самым продуктивным и цитируемым авторам и предметным областям (общее число публикаций, суммарное цитирование, индекс Хирша, позиция в рейтинге российских научно-исследовательских организаций).

· Общая статистика по публикациям и цитированиям в 5-ти летнем «окне цитирования» (общее число публикаций за 5 лет, доля публикаций в российских журналах из перечня ВАК и в зарубежных журналах, число цитирований, среднее число публикаций в расчете на автора, среднее число цитирований в расчете на одну публикацию).

· Статистика публикаций и цитирований по годам (распределение публикаций и цитирований по годам).

· Статистические отчеты по структурным подразделениям за выбранный период деятельности, по продуктивным авторам и предметным областям деятельности.

Incites – аналитический инструмент для оценки научной деятельности организации с доступом к основным показателям публикационной активности, включенных в массив базы данных Web of Science для подписчиков Thomson Reuters, осуществляющего рейтинг мировых университетов.

Рабочие модули в Incites:

1. Оценка научной деятельности организации (статистические отчеты по научной продуктивности и публикационной активности организации, отчеты по совместным проектам и международному сотрудничеству, отчеты по предметным областям, отчеты, включающие закономерности и анализ изменений во времени, анализ влияния публикаций и источников цитирований).

2. Сравнение стран и организаций; доступ к обобщенным данным по исследовательской деятельности отдельных стран и организаций.

Типы отчетов в Incites:

· Обобщенные отчеты (общий обзор за весь период публикаций организации, которые включены в массив данных Web of Science) – по количеству публикаций, цитирований к ним, а также самым продуктивным авторам и предметным областям.

· Общая статистика по публикациям (статистика цитирований: количество цитирований и количество публикаций в Web of Science; количество цитирований на одну публикацию, индекс Хирша, медиана цитирований, первое и второе поколений цитирований; распределение публикаций по предметным областям, индикаторы специализированности и мультидисциплинарности; статистика по совместным работам; доля публикаций выше/ниже среднего уровня; список организаций с финансированием по грантам).

· Отчеты по результатам научной деятельности (динамика публикаций и ежегодного цитирования) – отчеты по авторам, с ранжированием по публикациям, цитированию, предметным областям, журналам, организациям и странам, совместно с которыми были опубликованы работы. В отчетах используются нормализованные показатели полученного цитирования к ожидаемому цитированию в конкретной предметной области, с учетом источников цитирования (импакт-фактор и рейтинг). Проводится анализ влияния публикаций и источников цитирований для определения тематической направленности публикаций, потенциальных возможностей для сотрудничества, поиска партнеров для совместных проектов, определения потенциальных журналов, в которых можно публиковаться.

· Создание специальных (настраиваемых отчетов) по наборам параметров: авторам, предметным областям, организациям, странам, журналам, ключевым словам, типам публикаций, грантам.

IV. Выводы

Сравнение 2-х аналитических инструментов РИНЦ - Science Index и Incites показало следующее.

По применяемым технологиям оценки научной деятельности прослеживается большое сходство между инструментами, они совместимы по архитектуре и рабочим модулям программы.

Информационно-аналитическая система РИНЦ - Science Index русифицирована, развивается по прототипу Incites в направлении:

1) выхода в международные библиометрические базы данных Web of Science Scopus (отбор 1000 лучших журналов для экспорта, импорта данных);

2) стандартизации показателей с учетом импакт-фактора и рейтинга журналов, тематических рубрик;

3) использование новых интеллектуальных методик для анализа исследовательских фронтов, отличительных компетенций, картирования науки (новый проект РИНЦ).

Информационно-аналитическая система Incites - англоязычная, с доступом к международной библиометрической базе Web of Science, с выходом в мировые рейтинги Thomson Reuters, с новыми, более развитыми интеллектуальными методиками и стандартизованными показателями для анализа результативности и рейтинга научной деятельности организации, сравнительной межстрановой оценки и оценки конкурентоспособных стратегий для международного сотрудничества.

Библиометрические продукты Science Index и Incites - это новый комплекс инновационных решений, совместное применение которых обеспечивает оценку результатов научных исследований и рейтинг организации, позволяет организациям оптимизировать стратегическое вложение средств, а также эффективно определять дальнейшие направления исследовательской работы и принимать рациональные решения при выборе персонала и партнеров.

Литература

1. Science Index [Организация]. Интерфейс для представителя организации. – М., РИНЦ. – 39 с.

2. Incites - аналитический инструмент для оценки научной деятельности- 32 с. URL: incites/isiknowledge.com (Дата обращения 15 марта 2013 г.).