Экспертная оценка российских научных журналов проводится с целью выделения лучших журналов в РИНЦ и размещения их в виде базы данных Russian Science Citation Index (RSCI) на платформе Web of Science. Подробнее о проекте RSCI можно прочитать здесь. Отобранные в рамках этого проекта журналы также будут выделены внутри РИНЦ в отдельную коллекцию (ядро РИНЦ), для которой дополнительно будет рассчитываться весь набор библиометрических показателей. В отличие от полной базы данных РИНЦ, где собираются все публикации российских ученых, независимо от их научной значимости, попадание публикаций в ядро РИНЦ должно гарантировать их соответствие определенному уровню качества. Этот подход в дальнейшем будет расширен и на другие типы публикаций (монографии, сборники статей, труды конференций и т.д.).

Для отбора лучших журналов используется как библиометрический подход, так и экспертная оценка. Библиометрическая методика, используемая для построения ранжированного списка российских журналов, описана здесь.

Координацию работ по экспертной оценке журналов осуществляет рабочая группа в составе: А.И.Григорьев (вице-президент РАН, академик РАН) - председатель, Л.М.Гохберг (первый проректор Высшей школы экономики) - заместитель председателя, А.А.Баранов (вице-президент РАМН, академик РАН), А.О.Глико (академик-секретарь Отделения наук о Земле РАН, академик РАН), Е.Н.Каблов (генеральный директор Всероссийского института авиационных материалов, академик РАН), В.В.Козлов (вице-президент РАН, академик РАН), Ю.Ф.Лачуга (вице-президент РАСХН, академик РАН), А.Р.Хохлов (проректор МГУ, академик РАН), Г.О.Еременко (генеральный директор Научной электронной библиотеки), А.Я.Назаренко - секретарь. В рамках рабочей группы созданы экспертные панели по каждому научному направлению. В задачу этих панелей входит отбор лучших журналов по соответствующим научным направлениям.

Кроме этого, проводится расширенная общественная экспертиза журналов путем онлайного анкетирования более 30 тысяч ведущих российских ученых. Экспертная оценка проводится на сайте eLIBRARY.RU путем заполнения экспертных анкет, где каждому журналу в списке по определенному научному направлению должен быть приписан один из уровней, отражающий его качество с точки зрения эксперта. При принятии окончательного решения о включении журнала в ядро РИНЦ и RSCI учитываются как результаты библиометрического анализа, так и результаты широкой общественной экспертизы российских журналов.

Для участия в экспертной оценке ученый должен быть зарегистрирован в системе Science Index в качестве автора научных публикаций, иметь ученую степень кандидата или доктора наук и общее число цитирований публикаций за 5 лет (2009-2013 гг.) не менее определенного порога, различающегося для разных научных направлений. Значения порогов определялись таким образом, чтобы отобрать 10% лучших по этому показателю авторов по каждому из научных направлений, то есть чтобы соблюдалось равное пропорциональное представительство ученых в разных областях знаний.

Чтобы приступить к заполнению экспертной анкеты, необходимо вначале войти в библиотеку eLIBRARY.RU, указав имя пользователя и пароль. Если Вы включены в пул экспертов, отобранных для проведения общественной экспертизы, то в конце этой страницы Вы увидите кнопку "Экспертная анкета". Если Вы хотите принять участие в экспертизе, но не зарегистрированы в системе Science Index, Вы можете зарегистрироваться в качестве автора научных публикаций.

Каждый участник опроса может выбрать не более трех научных направлений и оценить журналы по каждому из этих направлений, плюс, по желанию - мультидисциплинарные журналы. В качестве тематического рубрикатора используется OECD Field of science and technology (FOS) classification. Кроме названия рубрики, приводится более подробное ее описание с указанием научных направлений, включенных в данную рубрику. Журнал может быть отнесен к нескольким (но не более трех) научным направлениям.

Если журнал публикует статьи по более чем трем научным направлениям рубрикатора OECD, то он, как правило, включается в раздел "Мультидисциплинарные журналы". Мультидисциплинарные журналы поделены на три группы: мультидисциплинарные в области естественных и технических наук, мультидисциплинарные в области общественных и гуманитарных наук и мультидисциплинарные широкого профиля (по всем научным направлениям).

Каждый журнал в списке может быть отнесен к одному из уровней:

Для оценки журнала необходимо щелкнуть мышью на звездочке, соответствующей выбранному уровню (например, для установки оценки "журнал национального уровня" нужно кликнуть на третьей слева звездочке. Нажатие на другую звездочку будет переключать оценку. Если эксперт решил отказаться от оценки данного журнала, нужно оставить все звездочки серыми (если перед этим оценка была уже проставлена, нужно еще раз кликнуть на звездочке, соответствующей оценке). Не обязательно проставлять оценки всем журналам. Если журнал эксперту не знаком или он не хочет его оценивать по этическим соображениям (например, являясь аффилированным лицом по отношению к данному журналу), можно оставить вариант "журнал не знаком эксперту", изначально установленный для всех журналов.

Если эксперту для оценки нужна дополнительная информация о журнале, ее можно получить на странице описания журнала в eLIBRARY.RU, щелкнув на названии журнала в списке. Далее можно перейти на список выпусков журнала и просмотреть содержание имеющихся выпусков. Большинство российских научных журналов представлено на платформе eLIBRARY.RU в полнотекстовом виде, причем три четверти из них - в открытом доступе. Поэтому эксперт при желании может выборочно ознакомиться и с текстами статей в журнале. Весь набор библиометрических показателей и статистических распределений для журнала можно получить на странице "Анализ публикационной активности журнала", щелкнув на иконке в виде цветной диаграммы рядом с названием журнала в списке.

Вместе со списком журналов эксперт видит сводную табличку, где перечислены уровни и соответствующее количество журналов, отнесенное к каждому уровню. Табличка автоматически обновляется по мере заполнения анкеты.

По умолчанию журналы в списке сортированы по названию. При необходимости можно отсортировать журналы по их уровню, проставленному экспертом. Для этого нужно щелкнуть мышью на заголовке столбца "Уровень". Для возврата к сортировке по названию нужно щелкнуть мышью на заголовке столбца "Название журнала".

Эксперт может дополнительно аргументировать проставленную оценку путем добавления текстового комментария к любому из журналов в списке. Для этого нужно щелкнуть на иконке, расположенной справа от оценки соответствующего журнала. Откроется дополнительное окно, где в свободной форме могут быть приведены пояснения эксперта к проставленной оценке, в том числе информация о нарушении журналом научной этики, использовании технологий искусственной накрутки показателей, отсутствии рецензирования статей и т.д. После ввода или обновления текста комментария необходимо нажать на кнопку "Сохранить".

Можно также оставить текстовый комментарий к анкете в целом. Для этого нужно выбрать пункт "Добавить комментарий к экспертной анкете" в панели "Инструменты". Откроется дополнительное окно, где в свободной форме может быть указано на:

- несоответствие какого-либо журнала из списка данному тематическому направлению;

- неправильное включение журнала в список мультидисциплинарных или наоборот;

- отсутствие какого-то достойного журнала в списке по данному направлению (или вообще его отсутствие в РИНЦ);

- другие замечания и предложения по методике проведения экспертной оценки.

После ввода или обновления текста комментария необходимо нажать на кнопку "Сохранить". Комментарии экспертов просматриваются вручную по мере получения анкет и, при необходимости, производится коррекция списков журналов.

Эксперт может также самостоятельно найти и добавить журнал в экспертную анкету по данному направлению, если считает, что какой-то достойный оценки журнал соответствует выбранной тематике, но при этом отсутствует в списке. Для этого нужно выбрать пункт "Добавить журнал в экспертную анкету" в панели "Инструменты" справа. В открывшемся дополнительном окне нужно воспользоваться поиском журналов в каталоге eLIBRARY.RU и в полученном списке щелкнуть на названии журнала, который нужно включить в состав анкеты по данному тематическому направлению. Если журнал отсутствует в каталоге, можно написать об этом в комментариях к анкете или обратиться в службу поддержки eLIBRARY.RU.

В список журналов для экспертной оценки и формирования ядра РИНЦ и базы данных RSCI могут быть включены научные журналы, выпускаемые российскими издательствами на русском или английском языке, а также авторитетные журналы на русском языке из соседних стран. Если журнал выпускается в двух версиях (оригинальная версия на русском языке и переводная версия на английском), то в список включается только оригинальная версия.

При необходимости заполнение анкеты может продолжаться в течение нескольких сессий. Промежуточные результаты работы сохраняются автоматически. После окончания работы эксперт подписывает анкету и она уже не подлежит дальнейшему изменению. Для подписания нужно выбрать пункт "Подписать экспертную анкету" в панели "Инструменты" справа. Если эксперт оценивает журналы по нескольким направлениям, анкета со списком журналов по каждому направлению подписывается отдельно. До момента подписания анкета не считается заполненной и в окончательной оценке журналов не участвует.

Заполненные анкеты принимаются до 31 августа 2015 г. Результаты оценки журналов будут опубликованы на сайте eLIBRARY.RU. Анкетирование анонимное, то есть фамилии экспертов или какие-либо их идентификаторы публиковаться не будут.