Новый источник данных для наукометрических исследований © М.Р. Когаловский © С.И. Паринов Институт проблем рынка РАН Центральный экономико-математический институт РАН Москва kogalov@cemi.rssi.ru sparinov@gmail.com Аннотация ченных для поддержки исследовательских программ и отдельных проектов. Обсуждается подход к созданию новых ис- Сложившаяся практика оценки научной резуль- точников данных для наукометрических ис- тативности ученых и научных периодических изда- следований, основанный на технологии се- ний базируется, в частности, на использовании ин- мантического структурирования контента дексов цитирования. Нужно отметить, что термин научных электронных библиотек, который индекс цитирования имеет два значения. Это, одной был предложен авторами в ранее опублико- стороны, библиографическая информационная си- ванных работах. Рассматриваются основные стема, предназначенная для наукометрических из- принципы предлагаемого подхода, а также мерений, в которой регистрируются связи цитиро- результаты его реализации в среде системы вания, определяемые пристатейными списками ис- Соционет. В качестве нового наукометриче- точников, между научными публикациями из охва- ского источника данных рассматриваются тываемого ими корпуса периодических изданий. С коллекции семантических связей между другой стороны – это имеющий несколько разно- различными информационными объектами видностей наукометрический показатель, представ- из контента системы. Семантические связи ляющий собой статистическую оценку количества классифицируются с помощью заданной цитирований научных публикации какого-либо ав- таксономии, представляемой в виде набора тора (традиционное простое количество цитирова- контролируемых словарей. Такие источники ний, индекс Хирша и др.). данных позволяют проводить более много- Более значимыми считаются статьи, опублико- аспектные по сравнению с традиционными ванные в журналах с более высоким импакт- наукометрические исследования представ- фактором, а также индексируемые признанными ленного в системе корпуса научных знаний. международными системами - индексами цитирова- По мнению авторов, создание глобальных ния SCOPUS, Web of Science, Web of Knowledge, автономных репозиториев семантических Springer и др. Активно ведется работа по формиро- связей, интегрирующих коллекции связей ванию отечественной системы РИНЦ, которая пока, из различных научных электронных биб- к сожалению, не располагает достаточно представи- лиотек в анализируемых областях знаний, тельным корпусом публикаций для наукометриче- является перспективным направлением раз ских измерений, но охватываемое ею научное пуб- вития наукометрии. Работа поддержана ликационное пространство интенсивно развивается. РФФИ, проект 12-07-00518-а и РГНФ, про- ект 11-02-12026-в. Несомненно, количественные характеристики внимания представителей научного сообщества к 1 Введение той или иной публикации, а также интегральные ха- рактеристики внимания к публикациям конкретного В настоящее время важную роль в оценке дея- автора или периодического издания, представляе- тельности исследовательских организаций и ученых мые индексами цитирования, являются важными стали играть наукометрические измерения, резуль- показателями качества научной деятельности. Од- таты которых существенным образом влияют на нако одной из слабых сторон традиционной практи- формирование их научного авторитета, а также и на ки наукометрических измерений является их бази- распределение финансовых ресурсов, предназна- рование на связях цитирования с неопределенной явным образом семантикой. Мы называем такие Труды 15-й Всероссийской научной конференции связи «немыми» [6], т.к. они сами по себе не несут «Электронные библиотеки: перспективные методы какой-либо информации, характеризующей, напри- и технологии, электронные коллекции» — RCDL- мер, мнение автора цитирующей работы о цитируе- 2013, Ярославль, Россия, 14-17 октября 2013 г. мом источнике или цель цитирования. В связи с 21 этим возможны такие парадоксальные ситуации, ко- ческих исследований по сравнению с известными гда высоким количеством цитирований обладает проектами, прежде всего, за счет иного способа статья, содержащая грубые ошибки и/или принци- представления семантических связей [6-8, 24, 25]. пиальные заблуждения, касающиеся обсуждаемой Описания семантических связей представляются в проблемы, и в связи с этим вызывающая активный данном проекте как самостоятельные информаци- отклик научного сообщества. онные объекты, а не встраиваются в метаданные Избежать указанных ситуаций и вместе с тем связанных публикаций. Особенности принятых ав- существенно обогатить информационную основу торами решений, некоторые новые результаты в наукометрических исследований позволяет исполь- развитии и реализации ранее опубликованного под- зование в системах - индексах цитирования семан- хода, а также функции необходимых для этого ме- тических связей между научными публикациями. ханизмов системы Соционет [10, 23] обсуждаются в Мы называем семантическими связи с явным обра- следующих разделах статьи. зом декларированной семантикой. Такие связи мо- В разделе 2 обсуждаются возможные способы гут создаваться, поддерживаться и использоваться представления семантических связей (их описаний) для наукометрических исследований и в научных в контенте научной электронной библиотеки. Аргу- электронных библиотеках, а также в других науч- ментируются достоинства их представления как са- ных информационных системах, обладающих необ- мостоятельных информационных объектов. Раздел 3 ходимыми для этого механизмами. посвящен рассмотрению методов создания и описа- Актуальность такого подхода отмечалась, в ния семантических связей. В разделе 4 обсуждаются частности, еще в работе [5]. Такие более информа- вопросы использования онтологий связей и осно- тивные источники для наукометрических исследо- ванных на них контролируемых словарей для опи- ваний позволяют генерировать не только традици- сания семантики связей, кратко характеризуются онные наукометрические показатели, но и, что более опубликованные проекты онтологий связей, резуль- важно, получать новые многоаспектные более утон- таты которых используются в данной работе. В раз- ченные количественные и качественные характери- деле 5 рассматривается организация совокупности стики отдельных публикаций или групп публика- определенных в электронной библиотеке семанти- ций, авторов публикаций, а также научных органи- ческих связей как нового источника данных для заций в целом. Исследуя структуру семантических наукометрических исследований. Наконец, в разде- связей, можно выявлять формирующиеся направле- ле 6 описаны результаты реализации предлагаемого ния в науке, исследовать историю их развития, по- подхода в среде системы Соционет. В заключении лучать другие полезные результаты. обсуждаются элементы новизны обсуждаемого под- хода и кратко представлены предполагаемые В последние годы для явного описания семанти- направления развития данного проекта. ки связей разработан ряд специальных онтологий, учитывающих не только различные классы связей 2 Представление семантических связей в цитирования, но и связей другой природы, таких как «автор-публикация», «организация-автор», «публи- электронных библиотеках кация-фрагмент публикации» (аннотация, оглавле- В научной электронной библиотеке для каждой ние, предисловие, библиография и т.п.), связи меж- представленной в ней публикации и объектов дру- ду ее версиями, вариантами представления и др. гих типов, например, профилей авторов или органи- Одним из ранних проектов в этой области является заций, существует некоторый информационный комплекс онтологий SPAR (The Semantic Publishing объект (описатель), содержащий совокупность and Referencing Ontologies) [28, 32]. Следует упомя- определяющих его свойства метаданных. Если нуть также онтологию SWAN (Semantic Web Appli- необходимо учредить и явным образом отразить cations in Neuromedicine) [26], созданную специали- существование связи между данным и некоторым стами в области нейромедицины, рекомендацию другим объектом, например, связи цитирования, то SKOS (Simple Knowledge Organization System) [33] такая связь также явным образом должна быть опи- консорциума W3C. Работы в этой области ведутся в сана. Явная спецификация семантических связей европейской ассоциации euroCRIS в рамках рабочей между информационными объектами, составляю- группы CERIF (The Common European Research щими контент научной электронной библиотеки, Information Format) [12], а также другими научными обогащает представленный в ней корпус научных коллективами. знаний. Описатель связи (ее метаданные) является На основе указанных онтологий реализуется ряд ее представителем в информационной системе, как исследовательских проектов, в которых предусмат- и описатели связываемых объектов. ривается явная спецификация семантики связей. Из- В научных электронных библиотеках представ- вестны, например, проекты Nanopub.org [16] и ляют интерес прежде всего бинарные ориентиро- SiteULike.org [29]. Авторами данной работы с ис- ванные семантические связи. Далее будут рассмат- пользованием разработанных онтологий конструк- риваться именно такие связи. Информационный тивизирован и развит подход, представленный в уже объект, из которого исходит связь, будем называть упоминавшейся статье [5]. При этом учитываются исходным объектом связи, а на который связь не только связи цитирования и обеспечиваются но- направлена – ее целевым объектом. вые функциональные возможности для наукометри- 22 В известных авторам проектах [16, 29] для опи- связей легко обеспечивается точно так же, как и ин- сания факта существования такой связи вводятся теграция контентов самих электронных библиотек. дополнительные метаданные в описателе исходного Кроме того, как уже отмечалось, автономное информационного объекта описываемой связи. Для представление связей позволяет поддерживать вир- семантической связи значения таких атрибутов ха- туальную социальную среду для совместной дея- рактеризуют, в частности, не только идентификатор тельности пользователей-ученых в качестве экс- ее целевого объекта, но и ее семантику, а также дру- пертов, добровольно высказывающих мнения и гие свойства этой связи. При таком «встроенном» оценки, касающиеся представленных в электронной способе представления связей между существую- библиотеке публикаций и других научных инфор- щими в библиотеке информационными объектами мационных ресурсов. Эта деятельность дополняет создавать связи в системе может только лицо, обла- традиционную практику анонимного рецензирова- дающее полномочиями обновления описателей этих ния печатных изданий, а открытость высказанных объектов. Обычно такими полномочиями наделяют- оценок для научного сообщества позволяет ответ- ся администраторы информационных ресурсов, но ным образом реагировать на них, способствует бо- не пользователи электронной библиотеки. лее высокой ответственности и объективности их Другой, «автономный», способ представления авторов. Возможности для такой деятельности обес- связей между информационными объектами, кото- печиваются, например, сервисом F1000Research [17] рый предложен и развивается в работах авторов проекта FACULTYof1000. Однако подход, обсужда- данной статьи [6-8], предусматривает поддержку емый в этой статье, предусматривает поддержку описателей связей в системе как самостоятельных также структурированных данных в форме семанти- информационных объектов. Такой автономный опи- ческих связей, которые позволяют учитывать выска- сатель связи содержит метаданные, описывающие занные экспертами оценки в наукометрических ис- уникальные идентификаторы связываемых инфор- следованиях. мационных объектов, семантику связи, идентифика- В обсуждаемом здесь подходе используется тор учредившего связь лица, дату ее создания и не- именно «автономный» способ представления семан- которые другие необходимые характеристики. При тических связей. использовании такого способа представления связей учреждать их в системе могут не только админи- 3 Методы описания и создания страторы информационных ресурсов, но и обычные семантических связей зарегистрированные пользователи системы. Таким образом, открывается возможность для нового вида Будем далее предполагать, таким образом, что научной деятельности, позволяющая ученым в он- семантические связи между информационными объ- лайновом режиме высказывать свои мнения о пред- ектами контента электронной библиотеки представ- ставленных в электронной библиотеке публикациях, ляются как «автономные» информационные объек- оценивать описываемые в них результаты, характе- ты. При этом возможны три метода описания и со- ризовать семантику научных отношений между раз- здания таких объектов. личными публикациями. Можно, например, созда- Первый из них основан на компетенции ученых- вая связь, указать, что исходная ее публикация ис- экспертов и предусматривает «ручное» описание и пользует методы или данные, описанные в целевой создание ими связей при поддержке имеющегося в публикации этой связи, или что в исходной публи- библиотеке механизма со специальным пользова- кации обнаружен плагиат результатов, представлен- тельским интерфейсом. Создавая связь, эксперт ука- ных в целевой публикации связи и т.п. зывает в ее описателе идентификаторы исходного и Представление семантических связей в научной целевого объектов связи. Используя контролируе- электронной библиотеке как самостоятельных ин- мые словари (таксономии), основанные на поддер- формационных объектов обеспечивает ряд преиму- живаемой онтологии связей, он специфицирует ществ по сравнению со «встроенным» способом их класс, к которому относится данная связь. В описа- представления. Действительно, на основе контента теле связи также указываются идентифицирующие электронной библиотеки может быть создан авто- данные эксперта, дата создания связи, при необхо- номный по отношению к ее контенту репозиторий димости и комментарий [24, 25]. семантических связей, который может служить но- Второй метод применим в случае, когда исход- вым источником данных для наукометрии. Такие ный информационный объект связи является тек- репозитории, созданные в различных библиотеках, стовой публикацией. При этом требуется предвари- могут интегрироваться, и благодаря этому форми- тельная его обработка. Она заключается в том, что ровать глобальные репозитории семантических свя- эксперт просматривает не пристатейный список ли- зей для той или иной области знаний. На этом пути тературы, а текст публикации, и выявляет встреча- возможно создание достаточно представительных ющиеся в нем библиографические ссылки на ис- источников данных для наукометрии в различных пользованные источники. Анализируя контекст областях науки. Если электронные библиотеки по- каждой ссылки и используя контролируемые слова- строены на основе технологии открытых архивов ри семантических связей, он осуществляет ее онто- OAI (Open Archives Initiative) [21], интеграция со- логическое аннотирование [3]. Эту работу, конечно зданных в их среде репозиториев семантических же, может выполнить и сам автор данного текста. 23 Такой размеченный текст далее обрабатывается объектов, а также их отношений. Эти онтологии специальным механизмом системы, и для каждой описаны средствами языков OWL2 DL и RDF кон- аннотированной ссылки генерируется описатель со- сорциума W3C. Первые четыре из них (FaBiO, ответствующей связи, помещаемый в некоторую CiTO, BiRO and C4O) позволяют описывать библио- коллекцию связей, которая представлена в библио- графические объекты, библиографические записи и теке. При использовании данного метода, как и рас- источники в списках литературы публикаций, а смотренного выше, созданные связи обладают ав- также связи цитирования, контексты цитирования и торством, которое приписывается эксперту или ав- их связи с релевантными разделами цитируемых тору публикации, выполнившему указанную обра- публикаций. Четыре остальных онтологии (DoCO, ботку ее текста. Проблема онтологического анноти- PRO, PSO and PWO) могут использоваться для опи- рования библиографических ссылок в научных пуб- сания семантики компонентов документов, ролей и ликациях подробно рассматривается в работе [3]. состояний публикаций, потоков работ в издатель- Наконец, третий метод может рассматриваться ских процессах. как автоматизированный вариант второго. В по- Другой заслуживающий внимания проект в рас- следние годы активно развиваются исследования, сматриваемой области – модульный комплекс онто- посвященные анализу эмоциональной окраски, то- логий SWAN (Semantic Web Applications in Neuro- нальности текста [2, 14, 15, 20, 22]. Это направление medicine) [26], разработанный в Главном госпитале исследований называется в зарубежной литературе Массачусетса и Медицинской школе Гарварда. Ав- Sentiment analysis (или Opinion mining). Задача тако- торы характеризуют его назначение как обеспечение го анализа заключается в определении мнения авто- в Семантическом Вебе комфортной среды - соци- ра анализируемого текста относительно предмета ально-технической экосистемы, которая позволяет обсуждения. Если применить методы Sentiment создавать и сохранять семантический контекст analysis к окрестности внутритекстовой ссылки, т.е. научных коммуникаций, обеспечивает доступ к к ее контексту, как это делается в работе [34], то нему, его интеграцию, а также обмен неструктури- можно выявить мнение автора о цитируемой работе. рованной и слабоструктурированной цифровой Используя такой метод, можно тем самым автома- научной информацией. Онтологии комплекса опи- тизировать ту работу по онтологическому анноти- саны в его спецификации средствами языка описа- рованию ссылок, которую во втором подходе вы- ния онтологий уровня OWL DL. полняет эксперт. Далее, аналогично предыдущему, Примерно в то же время консорциумом W3C на основе таких аннотаций можно автоматически была принята рекомендация SKOS (Simple генерировать описатели связей. Их автором являет- Knowledge Organization System) [33], предназначен- ся, естественно, автор текста, содержащего анноти- ная для поддержки систем организации знаний - те- рованные ссылки. Конечно же, возможности такой заурусов, схем классификации, таксономий и руб- «диагностики» семантики ссылок ограничиваются рикаторов (Subject Heading Systems) - в среде Семан- лишь классами оценочных ссылок. тического Веба. SKOS определяет концептуальную В настоящее время в системе Соционет реализо- схему, называемую общей моделью данных, служа- ван только первый - экспертный «ручной» метод со- щую для совместного использования и связывания здания семантических связей как самостоятельных систем организации знаний средствами Веба. Благо- информационных объектов. даря унифицированной концептуальной схеме SKOS упрощается интеграция существующих си- 4 Описание семантики связей стем организации знаний в Семантический Веб. Основой для реализации пользовательских ин- Следует отметить, что принцип модульности ор- струментов, позволяющих создавать семантические ганизации таких сложных комплексных онтологий, связи между информационными объектами и опери- как SPAR и SWAN, облегчает их повторное исполь- ровать ими, стали разработанные в последние годы зование. В некоторых приложениях нет необходи- онтологии семантических связей. В частности, это мости использовать полную онтологию. Тогда могут онтологии связей между объектами научной сферы использоваться отдельные ее модули. Облегчается деятельности (публикациями различных типов, те- также интеграция онтологий. Так, в комплексе мами исследований, учеными, исследовательскими SPAR используются элементы SWAN, а в SWAN организациями и др.). В этих онтологиях определя- используется SKOS. ются иерархии классов связей, соответствующие Существенный вклад в рассматриваемую область различного рода отношениям, в которых могут со- вносит также европейская научная общественная стоять информационные объекты – участники свя- организация euroCRIS, инициировавшая и развива- зей. Рассмотрим их кратко. ющая проект CERIF. Одним из главных результатов Среди основательно проработанных проектов этого проекта является создание унифицированной следует назвать, прежде всего, модульный комплекс концептуальной схемы, называемой в материалах онтологий SPAR (the Semantic Publishing and Refer- проекта полной моделью данных (Full Data Model) encing Ontologies) [28, 32], созданный сотрудниками [11]. Эта модель рассматривается как единая основа Оксфордского и Болонского университетов. SPAR создания информационных систем (Current Research включает восемь независимых онтологий, позволя- Information Systems, CRIS) для поддержки научно- ющих описывать семантику библиографических организационной деятельности в разных странах и 24 различных научных организациях. Благодаря стан- мации о том, какие информационные объекты свя- дартизации концептуальной схемы обеспечивается заны, так и информации о семантике существующих интероперабельность таких систем. В последнее связей. время в рамках проекта CERIF была предложена Семантические связи, организованные в виде спецификация стандартизованной семантики пол- коллекций информационных объектов специального ной модели данных [12], онтология, определяющая типа, могут составлять подмножество контента систему терминов для обозначения сущностей этой электронной библиотеки. Они могут быть также ор- модели и отношений между ними. ганизованы в виде самостоятельного информацион- Рассмотренные онтологии могут быть использо- ного ресурса, сосуществующего с ее контентом. ваны для создания онтологии семантических связей Представляется заманчивой интеграция таких информационных объектов конкретной научной информационных ресурсов, созданных и поддержи- электронной библиотеки, адекватной характеру ваемых в различных научных электронных библио- представленных в ней информационных ресурсов и теках, и формирование открытых (свободно доступ- ее функциональных механизмов, в частности, ее ных) глобальных репозиториев семантических свя- наукометрического аппарата. Структура семантиче- зей для наукометрических исследований [24, 25] в ских связей, определенная на контенте электронной различных областях знаний. Такие источники дан- библиотеки, является многослойной [6-8]. Каждый ных более полно представляют корпус научных зна- ее слой соответствует некоторому классу связей, ний рассматриваемой области науки. На их основе определенному в используемой онтологии. Семан- можно формировать адекватную наукометрическую тическая структура контента библиотеки может ис- статистику и другие характеристики состояния дан- пользоваться как источник данных для наукометри- ной области знаний. ческих исследований, а также служить основой се- Интеграция ресурсов семантических связей раз- мантической навигации в ее контенте. Для практи- личных научных электронных библиотек может ческого использования на основе используемой он- быть осуществлена известными методами виртуаль- тологии для конкретной электронной библиотеки ной или материализованной интеграции данных из может быть сформирована таксономия семантиче- множества информационных источников [4, 19, 36]. ских связей, представленная в виде набора контро- Интеграция относительно легко реализуется при лируемых словарей имен классов семантических условии базирования библиотек-источников на тех- связей. нологии Инициативы открытых архивов OAI и про- В электронной библиотеке может поддерживать- токоле OAI-PMH [21, 35]. ся несколько таксономий связей, основанных на В обоих случаях может возникнуть проблема не- разных онтологиях, точно так же как для рубрика- однородности онтологий семантических связей, ис- ции информационных объектов может использо- пользуемых в библиотеках–источниках. Для ее ре- ваться несколько рубрикаторов научно-технической шения возможны два подхода. При первом подходе информации. Так, в системе Соционет поддержива- таксономия интегрированного репозитория строится ются рубрикатор ГРНТИ [1] и классификатор JEL как объединение таксономий, применяемых в элек- (Journal of Economic Literature Classification System) тронных библиотеках–источниках. В такой ситуа- [18]. На основе их рубрик по запросам генерируется ции интегрированный источник представляет собой наукометрическая статистика [9]. фактически федерацию семантически неоднородных При спецификации пользовательских запросов в наборов связей. Статистические запросы при этом электронной библиотеке по умолчанию может ис- будут учитывать только связи, семантика которых пользоваться основная встроенная в систему таксо- определена указанной в запросе таксономией. При номия с ее набором управляемых словарей. В про- втором подходе осуществляется семантическая ин- тивном случае используемая таксономия должна теграция всех охватываемых наборов связей, пред- специфицироваться в запросе. ставленных в библиотеках-источниках. Для инте- грированного репозитория создается некоторая об- 5 Описания семантических связей - щая таксономия таким образом, чтобы было воз- источник данных для наукометрии можно определить отображения таксономий биб- Организованные совокупности семантических лиотек-источников в эту общую таксономию. Ана- связей между информационными объектами кон- лиз и обработка контента интегрированного гло- тента научной электронной библиотеки, созданные бального репозитория связей осуществляется при описанными выше методами и средствами, служат этом на основе общей таксономии связей. более информативным источником данных для Помимо возможности обработки глобального наукометрических исследований по сравнению с репозитория семантических связей средствами со- традиционной наукометрией, которая базируется на зданных для него наукометрических сервисов, целе- множестве «немых» ссылок цитирования. сообразно обеспечить интерфейс прикладного про- Описания семантических связей могут использо- граммирования (API) для доступа к его контенту. ваться наукометрическими сервисами библиотеки, Таким образом, обеспечивается возможность разра- продуцирующими разнообразные показатели как на ботки разнообразных приложений, оперирующих основе предоставляемой описанием связей инфор- контентом глобального репозитория семантических связей. 25 6 Реализация предлагаемого подхода в тельного открытого архива. Этот архив при необхо- среде системы Соционет димости может интегрироваться с аналогичными архивами связей других электронных библиотек на В рассматриваемом проекте в качестве среды ре- основе протокола OAI-PMH. Таким образом могут ализации предлагаемого подхода используется си- формироваться глобальные репозитории семантиче- стема Соционет. В настоящее время реализованы ских связей, более представительные полигоны для механизмы системы, обеспечивающие описание, со- наукометрических исследований. Если интегрируе- здание, хранение, модификацию, удаление и про- мые архивы семантических связей не основаны на смотр семантических связей, формирование коллек- единой стандартной для них таксономии связей, то, ций связей. Кроме того, реализованы основные как уже отмечалось, возникнет необходимость ре- средства создания и поддержки контролируемых шения проблемы преодоления неоднородности так- словарей семантических связей. Реализован также сономий. ряд статистических сервисов, обрабатывающих се- Связи в системе Соционет могут создавать заре- мантику связей и генерирующих новые наукометри- гистрированные в ней пользователи. Такие пользо- ческие показатели. Рассмотрим несколько подроб- ватели имеют в системе свои профили и, тем самым, нее основные особенности уже реализованных они идентифицируемы как авторы создаваемых ими средств и сервисов. семантических связей. Имеющиеся в Соционет Создание и организация связей в системе. Со- средства мониторинга состояния связей в необхо- вокупности связей поддерживаются в системе в димых случаях (например, при появлении в системе форме коллекций информационных объектов специ- семантически противоречивых созданных разными ального типа linkage. Наряду с таким «автономным» авторами связей между информационными объек- вариантом представления семантических связей тами некоторой пары) могут оповещать их сообще- поддерживается и встроенный вариант, который, ниями по электронной почте, адрес которой должен однако, реализован лишь для обеспечения полноты указываться в профиле пользователя, формируемом возможностей при дальнейшем развитии системы. в процессе его регистрации в системе. Пока реализованы только средства для «ручного» При создании связи в Соционет формируется ее создания связей экспертом-пользователем системы описатель (метаданные связи), включающий следу- (см. разд. 3). К коллекциям связей применимы все ющие метаданные: уникальный идентификатор свя- имеющиеся в системе функциональные возможно- зи, тип и идентификатор ее исходного объекта, тип сти управления коллекциями любого типа данных. и идентификатор целевого объекта (или URI для Как уже указывалось, в Соционет поддержива- внешнего целевого объекта), описание ее семантики ются бинарные ориентированные семантические - класс таксономии, к которому она относится, дату связи. Информационными объектами–участниками ее создания, уникальный идентификатор, идентифи- связей могут быть объекты различных видов (элек- катор автора связи и при необходимости его ком- тронные монографии, статьи в периодике, диссерта- ментарий [24, 25]. ции и авторефераты диссертаций, классификаторы, В зависимости от типов информационных объек- авторы публикаций, исследовательские или образо- тов-участников создаваемой связи она может при- вательные учреждения и др.). Среди объектов- надлежать только к какому-либо классу таксономии, участников связей в Соционет могут быть и библио- соответствующему этой паре типов ее объектов- графические описания публикаций, возможно, до- участников. Однако для заданной пары объектов полненные аннотациями. Эти объекты в системе от- может быть создано несколько связей. Разные авто- носятся к типу artifact. Коллекциями таких объектов ры связей могут создать несколько связей одного могут представляться тематические библиографии. класса. Один и тот же автор не может создать не- Информационные объекты-участники связей мо- сколько связей одного класса для заданной пары гут быть внутренними для системы (содержатся в ее объектов, но имеет возможность создать несколько контенте) или внешними. Внешние объекты не со- связей разных классов. держатся в контенте системы. Они доступны в Вебе В некоторых ситуациях при создании связи по их адресу (URL). Допустимость внешних инфор- включаются системные механизмы, которые авто- мационных объектов, а также публикаций, пред- матически генерируют другие связи. Это имеет ме- ставленных их библиографическими описаниями сто, например, в случае, когда целевой объект со- (объекты типа artifact), в качестве участников связей здаваемой связи, являющийся текстом статьи, одно- позволяет охватить семантическими связями все до- временно состоит в связях с другими объектами, ко- ступное ученым цифровое научное информационное торые характеризуются связями как копии этой ста- пространство. тьи. Тогда, если создаваемая экспертом связь явля- Метаданные коллекций связей являются состав- ется оценочной для такого объекта, то автоматиче- ной частью репозитория метаданных системы Со- ски будут генерироваться аналогичные оценочные ционет, основанной на технологии открытых архи- связи того же исходного объекта с объектами, пред- вов OAI. Поэтому этот фрагмент репозитория может ставляющими другие копии. быть представлен в виде самостоятельного репози- Автоматическая генерация явно описанных свя- тория метаданных, обеспечивая организацию сово- зей может осуществляться также как побочный эф- купности коллекций связей в системе как самостоя- фект при создании связи, порождающей транзитив- 26 ные отношения между информационными объекта- Поскольку, как уже отмечалось, в системе могут ми в системе (см. пример ниже). одновременно поддерживаться несколько таксоно- Спецификация семантики связей. В инстру- мий семантических связей, при обращении к таким ментарии создания и использования семантических сервисам необходимо указывать на основе какой из связей в системе Соционет для спецификации се- них или какого конкретного контролируемого сло- мантики создаваемых связей использована гибрид- варя должна проводиться обработка пользователь- ная онтология, являющаяся расширением объеди- ского запроса. Например, если пользователя интере- нения некоторых фрагментов онтологий CiTO [27, сует статистика оценочных связей, то в запросе 30], DoCo [31], SWAN [26], SKOS [33] и CERIF [11, должен быть указан словарь или класс какого-либо 12]. На ее основе создана двухуровневая таксономия словаря научных оценок из той или иной поддержи- классов семантических связей, представленная в ви- ваемой в системе альтернативной таксономии. де набора контролируемых словарей, каждый из ко- Характер генерируемой по запросам статистиче- торых соответствует одному из классов верхнего ской информации может быть весьма разнообраз- уровня иерархии классов таксономии, а значения в ным. Например, можно запросить для конкретного словарях соответствуют подклассам этих классов. информационного объекта количество входящих Действующая версия системы Соционет поддер- или исходящих из него связей (т.е. связей, в которых живает набор контролируемых словарей семантиче- данный объект участвует как целевой или, соответ- ских связей, включающий словари: связей научного ственно, как исходный), относящихся к некоторому вывода; связей использования; связей между компо- классу верхнего уровня, т.е. к некоторому контро- нентами научного произведения; а также между его лируемому словарю таксономии в целом, или к его версиями или копиями; связей научных оценок подклассу, т.е. к одному из значений в заданном (оценочных связей); иерархических и ассоциатив- словаре. Содержательная интерпретация получен- ных связей между публикациями; связей объектов ной статистики, естественно, зависит от заданного вида «персона-персона», «персона-организация», словаря. Здесь возможно большое количество вари- «персона-публикация». Более подробно используе- антов: сколько имеется позитивных или негативных мая в Соционет таксономия семантических связей и мнений о данной статье, в каком количестве работ представляющие ее контролируемые словари опи- используются предложенные в ней методы или со- саны в работе [8]. держащиеся в ней научные данные, сколько обна- ружено случаев плагиата данной статьи и т.д. Важно здесь отметить, что созданная для Социо- нет таксономия семантических связей позволяет При формировании статистики для некоторых классифицировать связи не только между объекта- классов таксономии могут учитываться транзитив- ми-научными текстами. Это обстоятельство имеет ные связи этих классов. Например, существует связь существенное значение, поскольку, участниками между статьей A - исходным объектом связи и ста- связей в системе могут быть как научные публика- тьей B – целевым объектом этой связи, указываю- ции и их компоненты, так и наборы научных дан- щая, что в B предлагается более широкое обсужде- ных, организации и их сотрудники – авторы инфор- ние проблемы, которой посвящена A. Кроме того, мационных объектов и пользователи системы, а существует связь между статьей B как исходным также информационные объекты других типов, объектом и статьей C – целевым объектом этой свя- представленные в контенте системы. зи, которая также указывает, что в C предлагается более широкий взгляд на предмет обсуждения по В системе Соционет реализован механизм рас- сравнению с B. Тогда фактически существует явно ширения таксономии семантических связей пользо- не описанная транзитивная связь A с C с той же се- вателями путем дополнения классов к существую- мантикой. Это обстоятельство должно учитываться щим словарям и создания новых контролируемых при формировании статистики статей, в которых словарей в режиме модерирования администрато- более широко обсуждается проблема, рассматрива- ром системы. емая в статье A. Сервисы системы для операций с семантиче- Статистические запросы могут быть обобщены скими связями. Эти сервисы выполняют довольно на все множество информационных объектов задан- большой набор функций, позволяющих получать ного типа или на все связи класса верхнего уровня разнообразную информацию о структуре связей в таксономии (на указанный словарь в целом). библиотеке. Прежде всего, это статистическая ин- Например, может запрашиваться статистика мнений формация. Ряд таких сервисов уже реализован в си- обо всей совокупности монографий из какой-либо стеме. Реализованы возможности семантической коллекции или общее количество работ, в которых навигации по слою структуры связей, соответству- высказано позитивное мнение о данной работе. ющему заданному классу связей. Предстоит также реализация ряда других сервисов, осуществляющих Поскольку в описателях связей указывается дата исследование топологии графа связей и позволяю- их создания, возможны запросы статистики, отно- щих на этой основе получать ряд полезных резуль- сящейся к заданным промежуткам времени или, что татов, характеризующих состояние и генезис пред- более сложно, динамической статистики (времен- ставленного в системе корпуса научных знаний. ных рядов некоторых статистических показателей). Другая группа запросов позволяет получить пе- речень конкретных информационных объектов биб- 27 лиотеки, связанных с заданным объектом как ис- системе Соционет, и продолжается работа по разви- ходным или целевым в связях заданных классов. тию его функциональных возможностей в рассмот- Содержательные интерпретации получаемого при ренных направлениях. этом результата также различаются в зависимости Некоторые идеи рассмотренного подхода опуб- от используемого словаря или конкретного его клас- ликованы другими авторами практически одновре- са связей. Запросы этого вида позволяют, например, менно с нашими ранними работами в этой области. выяснить, на результаты каких публикаций опирает- Однако рассмотренный здесь подход, по мнению ся некоторая конкретная работа или, наоборот, в ка- авторов, обладает существенной степенью новизны ких публикациях получены результаты, основанные по отношению к известным работам. на данной работе. При этом можно учитывать не Одно из главных отличий заключается в пред- только непосредственные, но и транзитивные связи. ставлении семантических связей как самостоятель- В критерии отбора интересующих пользователя свя- ных информационных объектов специального типа зей может также использоваться идентификатор ав- данных linkage, которые хранятся автономно от объ- тора связей. ектов-участников связей, а не встраиваются в их Используя цепочки связей вида «автор- описатели. Отчуждение описателей связей от описа- публикация» + «публикация-публикация» можно телей связываемых объектов позволяет строить кол- получить количество публикаций, в которых выра- лекции связей, формировать на их основе репозито- жено негативное или позитивное отношение к пуб- рии связей, которые могут интегрироваться с дру- ликациям данного автора, либо список таких публи- гими репозиториями. Благодаря этому становится каций. С использованием более длинных цепочек возможным формирование представительных гло- вида «организация-сотрудник (автор)» + «автор- бальных репозиториев семантических связей для публикация» + «публикация-публикация» можно различных областей знаний. Может быть обеспече- получить аналогичные сведения для интересующей но также повторное использование коллекций се- организации, агрегированные по всем ее сотрудни- мантических связей как информационного ресурса кам – авторам представленных в системе работ. для наукометрических исследований, более содер- Наконец, важную группу запросов составляют жательных по сравнению с традиционной наукомет- запросы операций над полным графом связей. Здесь рией, основанной на «немых» связях цитирования. можно решать множество различных задач, связан- ных как с анализом топологии графа и вычленением Важно также, что благодаря этому связи может подграфов с заданными свойствами, так и с визуа- создавать лицо, не являющееся создателем инфор- лизацией подграфов. Так, можно вычленить и визу- мационных объектов и/или метаданных (описате- ализировать из многослойной структуры семантиче- лей) информационных объектов-участников связей. ских связей слой, соответствующий связям некото- Это могут делать любые пользователи, зарегистри- рого класса, например, указывающего на использо- рованные в системе, тем самым развивая семантиче- вание одной публикации из контента системы как скую структуру ее контента. Если описание связи основополагающей для других публикаций. Можно встроено в метаданные информационного объекта также запросить подграф, образованный связями, (обычно исходного объекта связи), то без вторжения относящимися к классу развития научных результа- в них создавать связи невозможно. А эта операция тов, и указать, что ему должна принадлежать неко- доступна только владельцу метаданных рассматри- торая имеющаяся в библиотеке общепризнанная ос- ваемого объекта. новополагающая публикация в некоторой области Другое достоинство предлагаемого подхода за- исследований. Полученный подграф будет характе- ключается в том, что в нашем случае используется ризовать логику развития данной области науки, ко- более многоаспектная онтология и основанная на нечно, если в контенте системы достаточно основа- ней таксономия семантических связей. Связывае- тельно представлены публикации, относящиеся к мыми информационными объектами могут быть не этой области. Еще одним примером операций над только научные публикации, но и научные инфор- полным графом связей библиотеки является опера- мационные объекты иных типов, а также объекты, ция вычленения из него подграфа связей, установ- представляющие авторов публикаций, пользовате- ленных данным пользователем, возможно, с указа- лей системы, организации, в рамках которых вы- нием в запросе также конкретного класса связей. полнялись публикуемые работы и т.п. Поэтому естественно, что онтология связей Соционет опре- 7 Заключение и направления деляет более богатое множество отношений, вопло- дальнейшей работы щаемых семантическими связями, поддерживаемы- ми в системе. Благодаря этому, анализируя структу- Мы рассмотрели подход, позволяющий исполь- ру таких связей, можно получать различные новые зовать коллекции или репозитории семантических количественные и качественные результаты, кото- связей информационных объектов контента науч- рые не позволяют получать существующие индексы ных электронных библиотек, расширенного внеш- цитирования. Важно отметить, что при этом преду- ними информационными объектами, как источник сматривается возможность использования одновре- данных для новых нетрадиционных многоаспектных менно нескольких альтернативных таксономий свя- наукометрических исследований. Прототип необхо- зей. димых для этого программных средств реализован в 28 Рассматриваемый подход обеспечивает создание [3]. Когаловский М.Р. Онтологическое аннотиро- и динамическое развитие пользователями системы вание библиографических ссылок в научных семантической структуры ее контента, которая публикациях и его использование в наукомет- представляет собой своего рода его «семантический рии //Информационные ресурсы России (в пе- ореол» (Semantic Halo [13]). Благодаря ему пользо- чати). ватели получают информационно насыщенное [4]. Когаловский М.Р. Методы интеграции данных представление о структуре мнений ученых по пово- в информационных системах. Депонент Соци- ду существующих в системе информационных объ- онет, ектов. Вместе с тем, обеспечивается семантическая 2010.http://socionet.ru/pub.xml?h=RePEc:rus: навигация по контенту системы, которая может rssalc:web-39 [Дата обращения 15 июля 2013 г.] осуществляться по слоям семантической структуры, [5]. Когаловский М.Р., Паринов С.И. Использова- соответствующим классам используемой таксоно- ние связей цитирования для наукометрических мии, и создает комфортные условия для доступа измерений в системе Соционет. Институт про- пользователей к информационным ресурсам систе- блем рынка РАН, Центральный экономико- мы. математический институт РАН, 2009. Элек- Отметим, наконец, еще одну важную особен- тронный депонент Соционет. http://socionet.ru/ ность обсуждаемого в данной работе подхода. Он publication.xml?h=repec:rus: rssalc:web-32 [Дата открывает возможности для новых форм научной обращения 15 июля 2013 г.] деятельности, воплощаемой в виртуальной среде [6]. Когаловский М.Р., Паринов С.И. Семантиче- онлайновой системы. Электронная библиотека, в ское структурирование контента научных элек- которой реализован обсуждаемый подход, пред- тронных библиотек на основе онтологий. В кн.: ставляет собой фактически социальную сеть, в среде "Современные технологии интеграции инфор- которой совместно действуют представители науч- мационных ресурсов: сборник научных тру- ного сообщества. Результатами их деятельности яв- дов». - Санкт-Петербург: Президентская биб- ляются представленные в явном виде мнения о лиотека им. Б.Н. Ельцина, 2011. научных публикациях, а также развивающаяся се- [7]. Когаловский М.Р., Паринов С.И. Классифика- мантическая структура контента системы, позволя- ция и использование семантических связей ющая использовать новые методы наукометриче- между информационными объектами в науч- ских исследований. Представление семантических ных электронных библиотеках //Информатика связей в системе как самостоятельных информаци- и ее применения. 2012. Т. 6. Вып. 3. С. 32-42. онных объектов позволяет декларировать мнения о них точно так же, как и относительно других ин- [8]. Паринов С.И., Когаловский М.Р. Технология формационных объектов. Такая поддержка мнений семантического структурирования контента о мнениях образует своеобразный дискуссионный научных электронных библиотек. Труды XIII форум в среде системы. Всероссийской научной конференции «Элек- тронные библиотеки: перспективные методы и Авторы намерены продолжить работу по разви- технологии, электронные коллекции – RCDL- тию инструментария, реализующего рассмотренный 2011. Воронеж, 19-22 октября 2011 г.». – г. Во- подход, в нескольких направлениях. В частности, ронеж: Воронежский государственный универ- предполагается создать механизм поддержки аль- ситет, 2011. – С. 94-103. тернативных таксономий семантических связей. [9]. Когаловский М.Р., Паринов С.И. Наукометри- Планируются также эксперименты по интеграции ческие измерения в электронных библиотеках репозиториев семантических связей. Наконец, будут на основе рубрикаторов научной информации созданы дополнительные сервисы для наукометри- //Электронные библиотеки (электронный жур- ческих исследований, учитывающие новые инфор- нал). 2012. Т. 15, № 6. http://www.elbib.ru/ index. мационные возможности семантически структури- phtml?page=elbib/rus/journal/2012/part6/KP [Да- рованного контента системы. та обращения 15 июля 2013 г.] Литература [10]. Паринов С.И., Ляпунов В.М., Пузырев Р.Л. Си- стема Соционет как платформа для разработки [1]. ГРНТИ – рубрикатор научно-технической ин- научных информационных ресурсов и онлай- формации. Редакция 2007 года. – URL: http:// новых сервисов //Российский научный элек- www.grnti.ru/ [Дата обращения 15 июля 2013 г.] тронный журнал «Электронные библиотеки». – [2]. Клековкина М.В., Котельников Е.В. Метод ав- 2003. – Том 6. – Вып. 1. http://www.elbib. томатической классификации текстов по то- ru/index.phtml?page=elbib/rus/journal/2003/part1/ нальности, основанный на словаре эмоцио- PLP [Дата обращения 15 июля 2013 г.] нальной лексики. Труды 14-й Всероссийской [11]. CERIF 1.3 Full Data Model (FDM): Introduction научной конференции «Электронные библио- and Specification. euroCRIS, 2012. http://www. теки: перспективные методы и технологии, eurocris.org/Uploads/Web%20pages/CERIF-1.3/ электронные коллекции» — RCDL-2012, Пере- Specifications/CERIF1.3_FDM.pdf [Дата обра- славль-Залесский, Россия, 15-18 октября 2012 г. щения 15 июля 2013 г.] Переславль-Залесский, Институт программных систем РАН, 2012. – С. 118-123. 29 [12]. CERIF 1.3 Semantics: Research Vocabulary. CE- [25]. Parinov S. Towards a Semantic Segment of a Re- RIF Task Group, euroCRIS, 2012. http://www. eu- search e-Infrastructure: necessary information ob- rocris.org/Uploads/Web%20pages/CERIF-1.3/ jects, tools and services. Metadata and Semantics Specifications/CERIF1.3_Semantics.pdf [Дата Research, Communications in Computer and In- обращения 15 июля 2013 г.] formation Science. J. M. Dodero, M. Palomo- [13]. Dix A., Levialdi S. & Malizia A. Semantic halo for Duarte, P. Karampiperis, Eds. Springer, vol. 343, collaboration tagging systems. In the Social Navi- 2012, pp. 133-145. http://socionet.ru/pub.xml?h= gation and Community-Based Adaptation Tech- RePEc:rus: mqijxk:30 [Дата обращения 15 июля nologies Workshop-June 20th, 2006. 2013 г.] [14]. Feldman R. Techniques and Applications for Sen- [26]. Semantic Web Applications in Neuromedicine timent Analysis. Сommunications of the ACM, (SWAN) Ontology. W3C Interest Group Note, 20 April 2013, vol. 56, no. 4, pp. 82-89. October 2009. http://www.w3.org/TR/2009/NOTE [15]. Galassini C., Malizia A., and Bellucci A. An ap- -hcls-swan-20091020/ [Дата обращения 15 июля proach for developing intelligent systems for sen- 2013 г.] timent analysis over social networks. Intelligent [27]. Shotton D. CiTO, the Citation Typing Ontology. J. Systems and Control /742: Computational Biosci- of Biomedical Semantics 2010, 1(Suppl 1): S6. ence, J.F. Whidborne, P. Willis, G. Montana, Eds. http://www.jbiomedsem.com/content/1/S1/S6 [Да- Cambridge, United Kingdom, July 11 – 13, 2011. та обращения 15 июля 2013 г.] [16]. Groth P., Gibson A., Velterop J. The Anatomy of a [28]. Shotton D. Introduction the Semantic Publishing Nano-publication. Information Services and Use and Referencing (SPAR) Ontologies. October 14, 30(1/2) (2010). http://iospress.metapress.com/ con- 2010. http://opencitations.wordpress.com/2010/10/ tent/ftkh21q50t521wm2/ [Дата обращения 15 14/introducing-the-semantic-publishing-and-refere июля 2013 г.] ncing-spar-ontologies/ [Дата обращения 15 июля [17]. F1000Research. http://f1000research.com/ [Дата 2013 г.] обращения 15 июля 2013 г.] [29]. Shotton D. Use of CiTO in CiteULike. 2010. [18]. Journal of Economic Literature (JEL) Classifica- http://opencitations.wordpress.com/2010/10/21/use tion System. – URL: http://www.aeaweb.org/jel/jel -of-cito-in-citeulike/[Дата обращения 15 июля _class_system.php[Дата обращения 15 июля 2013 г.] 2013 г.] [30]. Shotton D., Peroni S. CiTO, The Citation Typing [19]. Kalinichenko L.A., Briukhov D.O., Skvortsov Ontology, v2.0. – 2011. http://purl.org/spar/cito/ N.A., Zakharov V.N. Infrastructure of the subject [Дата обращения 15 июля 2013 г.] mediating environment aiming at semantic in- [31]. Shotton D., Peroni S. DoCO, the Document Com- teroperability of heterogeneous digital library col- ponents Ontology. – 2011. http://speroni.web.cs. lections. Вторая Всероссийская научная конфе- unibo.it/cgi-bin/lode/req.py?req=http:/purl.org/ ренция «Электронные библиотеки: перспек- spar/doco [Дата обращения 15 июля 2013 г.] тивные методы и технологии, электронные [32]. Shotton D., Peroni S. Semantic annotation of pub- коллекции», Протвино, 2000, с. 78-90. lication entities using the SPAR (Semantic Pub- [20]. Karlsson S. About LogEc, 2011. http://logec.repec. lishing and Referencing) Ontologies /Beyond the org/about.htm [Дата обращения 15 июля 2013 г.] PDF Workshop, La Jolla, 19 January 2011. [21]. Open Archives Initiative. http://www. Openarchi http://imageweb.zoo.ox.ac.uk/pub/2010/Publicatio ves.org/ [Дата обращения 15 июля 2013 г.] ns/Shotton& Peroni_semantic_annotation_of_ pub lication_entities.pdf [Дата обращения 15 июля [22]. Pang B., Lee L. Opinion Mining and Sentiment 2013 г.] Analysis //Foundations and Trends in Information Retrieval. 2008. Volume 2, Issue 1-2. January [33]. SKOS Simple Knowledge Organization System 2008, pp. 1-135. http://dl.acm.org/citation.cfm?id= Reference. W3C Recommendation, 18 August 1454712 [Дата обращения 15 июля 2013 г.] 2009. http://www.w3.org/TR/skos-reference/ [Да- та обращения 15 июля 2013 г.] [23]. Parinov S. The electronic library: using technology to measure and support Open Science. In: Proceed- [34]. Small H. Interpreting maps of science using cita- ings of the World Library and Information Con- tion context sentiments: a preliminary investiga- gress: 76th IFLA General Conference and Assem- tion. Scientometrics, Springer Netherlands, Vol- bly, Gothenburg, Sweden, August 10-15, 2010. ume 87, Issue 2, 2011, pp. 373-388 http://www.ifla.org/files/hq/papers/ifla76/155-pari [35]. The Open Archives Initiative Protocol for Metada- nov-en.pdf [Дата обращения 15 июля 2013 г.] ta Harvesting. Protocol Version 2.0 of 2002-06-14. [24]. Parinov S. Open Repository of Semantic Linkages. Document Version 2008-12-07T20:42:00Z. In: Proceedings of 11th International Conference http://www.openarchives.org/OAI/2.0/openarchive on Current Research Information Systems e-Infra- sprotocol.htm [Дата обращения 5 июля 2013 г.] structure for Research and Innovations (CRIS [36]. Wache H., Vogele T., Visser U., Stuckenschmidt 2012), Prague, 2012. http://socionet.ru/publication. H., Schuster G., Neumann H. and Hubner S. On- xml?h=repec:rus:mqijxk:29 [Дата обращения 15 tology-Based Integration of Information — A Sur- июля 2013 г.] vey of Existing Approaches. In Proceedings of 30 IJCAI-01 Workshop: Ontologies and Information Sharing, Seattle, WA, 2001, pp. 108-117. http://citeseerx.ist.psu.edu/viewdoc/summary?doi= 10.1.1.12.7857[Дата обращения 15 июля 2013 г.] New data source for scientometric studies Mikhail R. Kogalovsky, Sergey I. Parinov The paper is dedicated to discussion of an approach to creation of new data sources for the scientometric re- searches, based on technology of semantic structuring the content of scientific digital libraries. The technology was described by authors in earlier published their pa- pers. The basic principles of offered approach and the results of its implementation in the environment of So- cionet system are considered. Mentioned new scien- tometric data source is collection of semantic linkages between various information objects of the system con- tent. The linkages are classified by given taxonomy that is represented by a set of semantic controlled vocabular- ies. Such data sources allow more multifold analysis in comparison with traditional scientometric researches of the scientific knowledge corpus supported by the sys- tem. According to authors opinion the creation of the global autonomous repositories of semantic linkages which integrate the linkage collections from various sci- entific digital libraries in analyzed knowledge areas is perspective direction of scientometrics evolution. This research is supporting by RFBR, project 12-07-00518-a, and RFH, project 11-02-12026-в. 31