Новые требования и возможности для оценки результатов исследований

В силу ряда текущих обстоятельств в российской науке особое внимание получил тот факт, что большая часть научных исследований финансируется из «общественных» фондов и, как следствие, их расходование требует большей прозрачности для государства и налогоплательщиков. Для выполнения этих «требований времени» необходимы понятные и достаточно объективные индикаторы результативности исследований, которые должны быть публичны и доступны всем желающим. Интерес к подобным индикаторам вызван еще и тем, что реформа Российской академии наук, в т.ч., предусматривает усиление связей между материальным стимулированием ученых и показателями результатов их научной деятельности Правительством РФ утверждено, что программы исследований должны иметь «прозрачные механизмы оценки эффективности их реализации», а их финансовое обеспечение должно сопровождаться «информационной открытостью и регулярной публичной отчетностью».

Объективная текущая необходимость повышения прозрачности и эффективности процесса научных исследований совпала с важным изменением в научной среде: достигнута достаточно высокая степень переноса деятельности ученых в электронную онлайновую среду. Сбор, обработка и интерпретация следов этой активности открывает ранее недоступные возможности по формированию статистической базы о деятельности ученых и, в частности, об использовании результатов их исследований. С усилением степени переноса в онлайн информационной активности ученых подобная онлайновая статистика становится все более репрезентативной.

Онлайновая наукометрия на базе такой статистики, в сравнении с традиционной, позволяет получать данные о ретроспективе (с момента ее появления), текущем состоянии и тенденциях в деятельности отдельных ученых, организаций и научного сообщества в целом, включая индикаторы результативности исследований, с существенно меньшими затратами, большей точностью и с актуализацией, практически, в реальном времени. Если государство и налогоплательщики требуют улучшить прозрачность функционирования науки, а также дать более точную картину о результативности отдельных научных направлений, эффективности работы ученых и исследовательских организаций, то, на наш взгляд, не существует альтернативы развитию онлайновой наукометрии.

Онлайновые показатели результатов научно-исследовательской деятельности имеют явные позитивные перспективы, поскольку электронная онлайновая среда для создания, распространения и использования научного знания, которая представляет исходную статистику для этих показателей, является более эффективной для научной деятельности и удобной для ученых, чем традиционные бумажные технологии. Онлайновые показатели достаточно просты, прозрачны и легко проверяемы, а кроме этого – точность подобных оценок результатов научных исследований может быть существенно повышена в процессе создания специальных онлайновых технологий и сервисов, которые будут использоваться учеными для подготовки и отчуждения результатов своих исследований в электронной форме.

Одна из основных идей предлагаемого нового подхода к оценке результатов исследований на основе онлайновой наукометрии состоит в том, чтобы целенаправленно сформировать и развивать национальную онлайновую научную инфраструктуру так, чтобы она обладала, в том числе, и следующими необходимыми свойствами:

· ресурсы и сервисы такой онлайновой инфраструктуры предлагают ученым необходимый набор возможностей, с одной стороны, для отчуждения, распространения и авторского сопровождения создаваемого ими нового научного знания, а с другой – для беспрепятственного использования в различных видах и формах (в т.ч. для электронного цитирования с расширенным набором качественных атрибутов) всех имеющихся результатов исследований, полученных на средства из "общественных" фондов;

· ее сервисы предоставляют ученым средства для публичного выражения профессиональных оценок по полной шкале (от признания до неприятия) чужих результатов исследований, и визуализируют для отдельных результатов исследований их оценки возможного влияния на развитие науки;

· ее службы точно и оперативно в автоматическом режиме фиксируют, как именно ученые используют и оценивают результаты исследований друг друга (какие результаты, кем и в каком качестве используются);

· а также обрабатывают в оперативном автоматическом режиме следы онлайновой научной активности ученых, превращая их в наукометрическую статистику, накапливают такую статистику и предоставляют к ней открытый публичный доступ.

В большей степени стихийно формируемая в настоящее время онлайновая научная инфраструктура может и должна конструироваться так, чтобы, в том числе, обеспечить максимально точный и оперативный учет результативности научно-исследовательской деятельности. Более того, качественно новые возможности онлайновой инфраструктуры (по сравнению с традиционной) позволяют решать задачу оценивания результатов исследований в несколько более общей форме: как создание профессиональной сигнальной системы которая будет обеспечивать оперативной информацией, необходимой для правильной оценки текущего состояния и направлений развития науки, ученых, а также всех других действующих лиц процесса производства и использования новых научных знаний.

Для того, что данный подход начал действовать, исследовательским организациям и научному сообществу в целом необходимо решить три важные задачи:

1. организационно-подготовительную, что создаст необходимые начальные условия для реализации нового подхода;

2. организационно-мотивационную, что создаст действенные мотивации для ученых по применению новых правил исследовательской деятельности на основе уже существующих онлайновых служб и сервисов;

3. программно-техническую - для создания дополнительных служб и сервисов в составе онлайновой научной инфраструктуры, необходимых для полноценной реализации данного подхода.

Необходимость первого организационно-подготовительного шага определяется тем, что для полной и объективной оценки результатов как исследовательской, так и научно-технической деятельности (далее мы используем сокращение РНТД) в рамках предлагаемого онлайнового подхода должны быть реализованы следующие предварительные условия:

1. Научные статьи, материалы и другие научные продукты отчуждения нового знания и результатов исследований от их авторов должны быть в электронной форме помещены в Открытый Архив (ОА) исследовательской организации по правилам «Инициативы открытых архивов» Следовательно, каждая исследовательская организация должна иметь соответствующий ОА (или электронный репозиторий). Выполнение данного требования означает, что результаты исследований института будут доступны научному сообществу для максимально широкого и полного использования, т.к. организация материалов в виде ОА стала де-факто стандартом для представления научно-образовательных материалов для их обработки независимыми разработчиками. Ниже описаны некоторые способы создания институтами своих ОА.

2. Ученые должны помещать в ОА своего института все законченные результаты своих исследований. Выполнение этого требования обеспечивает полноту картины о результатах деятельности ученого. В сочетании с предыдущим требованием создаются условия для максимально полного использования всех результатов деятельности ученого. В современной научной практике это реализуется через стимулирование исследователей к электронному депонированию материалов с результатами их исследований. Особенности и место этого процесса по отношению к традиционной практике публикации статей в рецензируемых научных журналах и изданиях рассмотрены ниже.

Хотя перечисленные выше предварительные условия являются для российского научного сообщества все еще сравнительно новыми, в настоящее время они могут быть уже легко реализованы. Во-первых, благодаря достаточно широкому распространению в научной среде идей открытого доступа к результатам научных исследований, выполненных на средства из «общественных» фондов и, как следствие, наличия в исследовательских организациях психологической готовности к реализации отмеченных выше необходимых действий. Во-вторых, общее развитие Интернет технологий и начавшееся формирование национальной онлайновой научной инфраструктуры (например, системы Соционет) обеспечило исследовательские институты и ученых: а)доступными средствами для размещения электронных материалов с результатами исследований в открытом доступе и, как следствие, их оперативное распространение в научном сообществе, а также б)новыми возможностями использования результатов исследований и ускорения их кругооборота в процессе производства нового научного знания.

В следующих разделах представлены примеры реализации этих предварительных условий в институтах Отделения общественных наук РАН.

Следующим важным шагом к реализации предлагаемого подхода является создание мотиваций для ученых и исследовательских организаций, необходимых как для выполнения предварительных условий, так и внедрения предлагаемого подхода в целом.

Задача создания необходимых мотиваций может быть успешно решена, если онлайновая наукометрия начинает использоваться в государственных процедурах и регламентах профессиональной аттестации ученых, присуждения ученых степеней и оценки результатов деятельности исследовательских организаций (например, в деятельности ВАК и других служб Рособрнадзора). С другой стороны, уже сейчас научно-исследовательские организации могут использовать онлайновую наукометрию для более точного и оперативного оценивания результатов исследовательской деятельности своих научных подразделений и сотрудников.

Первые два шага вместе создают необходимые организационные предпосылки: исследовательские организации начинают использовать ОА и обязывают своих исследователей депонировать в них все законченные результаты исследований, выполненные на средства из "общественных" фондов. Подобные прецеденты уже есть, они описаны в следующем разделе. Имеющиеся на данный момент сервисы онлайновой научной инфраструктуры (например, в Соционет) сформируют для статей и материалов из институтских ОА онлайновые наукометрические показатели. Исследовательские организации используют эти показатели для своих процедур расчета персональных научных надбавок (или других форм материального стимулирования исследователей) и усиливают тем самым мотивацию ученых к выполнению необходимых подготовительных условий.

Последний, третий программно-технический шаг связан с дополнением и развитием существующей онлайновой научной инфраструктуры новыми средствами и сервисами. Этот вопрос, как нам представляется, является наиболее новым и дискуссионным. Поэтому именно ему посвящено основное содержание данной статьи.

Забегая вперед, при идеальной реализации описанных выше шагов предлагаемый подход к оценке РНТД(расчет научно-технической деятельности) будет работать следующим образом:

· Ученые депонируют все свои законченные результаты исследований (финансируемые из "общественных" фондов) в электронной форме в институтском ОА или в другом электронном репозитории с открытым доступом;

· Онлайновая научная инфраструктура обеспечивает оперативное распространение в научном сообществе сведений о статьях и материалах из отдельных институтских ОА;

· Интегральное содержание институтских ОА формирует корпус научных результатов в открытом доступе, а их электронная форма упрощает использование, цитирование и обработку результатов исследований;

· Специально созданные сервисы онлайновой научной инфраструктуры в автоматическом режиме собирают и обрабатывают данные о семантической/тематической близости материалов, просмотрах их описаний, скачивании полных текстов, цитировании, публикации материалов в рецензируемых изданиях и др., затем эти данные помещаются в единую наукометрическую статистическую базу, которая позволяет вычислять различные онлайновые показатели связанности, востребованности и использования результатов исследований, а также агрегировать их как для отдельных ученых, так и исследовательских организаций, включая их подразделения;

· Полученные таким образом онлайновые наукометрические показатели могут играть роль количественных характеристик результативности исследований отдельных ученых и научных подразделений, а также характеризовать их динамику во времени.

Если подобная схема начинает действовать, т.е. исследовательская организация, например, начинает использовать упомянутые онлайновые наукометрические показатели для материально и/или морального стимулирования своих сотрудников, то это приводит к разнообразным положительным последствиям, включая и такие:

· Ученые получают дополнительную мотивацию, чтобы продвигать, популяризировать и добиваться профессионального признания для своих депонированных в ОА материалов, т.к. это будет приводить к повышению их индивидуальных показателей научной езультативности;

· Ученые получают дополнительный интерес, чтобы предлагать свои депонированные в ОА материалы в рецензируемые издания (журналы), т.к. их публикация в таких журналах означает профессиональное признание качества и актуальности полученных результатов (об изменениях статуса научных журналов в такой ситуации см. ниже).

Лейтмотивом следующих разделов является тема практической возможности оправданности в общем-то значительных усилий, которые потребуются для развития онлайновой научной инфраструктуры, ввиду ожидаемого положительного системного эффекта от реализации нового подхода к оценке РНТД.

2.Онлайновая научная инфраструктура: возможности и необходимое развитие

Онлайновая научная инфраструктура представляет собой набор общедоступных Интернет технологий и сервисов, которые могут использоваться исследовательскими организациям вместо того, чтобы осуществлять самостоятельную разработку средств, обеспечивающих научно-техническую деятельность и профессиональные взаимодействия своих сотрудников. В частности, это подразумевает средства размещения научных материалов в отрытом доступе в виде электронных репозиториев или открытых архивов (ОА), соответствующих международным стандартами ]. В настоящее время такие средства уже созданы и развиваются в интересах научного сообщества определенными инициативными группами или уполномоченными государственными агентствами.

Полезность онлайновой инфраструктуры проявляется в том, что она

обеспечивает превращение содержания частных ОА в единое профессиональное информационное пространство (включая сквозной поиск и навигацию), а также предоставляет ученым разнообразные и часто конкурирующие средства для содержательного использования накопленных в профессиональном информационном пространстве научных материалов.

Дополнительно, онлайновая инфраструктура включает средства сбора и накопления статистики обо всех возможных аспектах активности действующих лиц и использования объектов информационного пространства. На основе этой статистики возможно создание динамических рядов разнообразных наукометрических показателей.