Анализ и оценка результативности НИОКР предприятий ракетно-космической промышленности на основе баз данных научного цитирования

Введение.

В условиях усиления конкуренции на мировом космическом рынке важное значение приобретает повышение эффективности всех направлений деятельности организаций космической отрасли, особенно НИОКР, являющихся основой инновационной деятельности. Для объективного анализа научной деятельности организаций космической отрасли необходимо проведение всесторонней оценки её результативности.

В статье производится оценка результативности научной деятельности организаций космической отрасли на основе информации, имеющейся в базах данных научного цитирования путем анализа публикационной активности. Для сравнительной оценки публикационной активности организаций космической отрасли России использованы инструменты анализа, предложенные в национальной библиографической базе данных научного цитирования РИНЦ (Российский индекс научного цитирования).

Основная часть.

В соответствии с пунктом 4 Правил оценки результативности деятельности научных организаций, выполняющих научно-исследовательские, опытно-конструкторские и технологические работы гражданского назначения [1], типовой методикой оценки результативности деятельности научных организаций, выполняющих научно-исследовательские, опытно-конструкторские и технологические работы гражданского назначения [2], [3], утверждена Методика оценки результативности деятельности научных организаций, выполняющих научно-исследовательские, опытно-конструкторские и технологические работы гражданского назначения.

Согласно Методике, целью проведения оценки результативности деятельности научных организаций является формирование эффективной системы научных организаций, увеличение их вклада в социально-экономическое развитие страны и повышение эффективности принятия управленческих решений в сфере науки.

В соответствии с Методикой оценке результативности деятельности научных организаций (далее – оценка результативности) подлежат научные организации, подведомственные Госкорпорации «Роскосмос», если объем научно-исследовательских, опытно-конструкторских и технологических работ (далее – работы) гражданского назначения в год проведения оценки составляет более 50% от общего объема работ.

Оценка результативности проводится на основе анализа и сопоставления показателей по следующим направлениям:

– научный потенциал и эффективность научных исследований;

– вовлеченность научной организации в национальное и мировое научно-образовательное сообщество;

– коммерциализация и прикладное значение результатов исследований;

– кадровая обеспеченность научной организации;

– ресурсная обеспеченность научной организации;

– состояние финансовой деятельности научной организации.

На основе показателей оценки результативности научная организация может быть отнесена к одной из следующих категорий:

– 1-я категория – научные организации-лидеры;

– 2-я категория – стабильные научные организации, демонстрирующие удовлетворительную результативность;

– 3-я категория – научные организации, утратившие научный профиль и перспективы развития.

По результатам проведения оценки результативности комиссия по оценке результативности деятельности научных организаций Госкорпорации «Роскосмос» готовит заключение с предложениями по отнесению научной организации к одной из указанных категорий.

Определены следующие критерии оценки результативности деятельности научных организаций:

1. Научный потенциал и эффективность научных исследований:

– общая характеристика научного потенциала;

– публикационная активность;

– объекты интеллектуальной собственности.

2. Вовлеченность научной организации в национальное и мировое научно-образовательное сообщество:

– участие в международном научно-техническом сотрудничестве;

– интеграция науки и образования.

3. Коммерциализация и прикладное значение результатов исследований:

– использование инновационных технологий;

– взаимодействие с реальным сектором экономики;

– инновационная инфраструктура.

4. Кадровая обеспеченность научной организации:

– обеспеченность исследователями;

– подготовка научных кадров.

5. Ресурсная обеспеченность научной организации:

– обеспеченность научным оборудованием и необходимыми условиями для научной работы.

6. Состояние финансовой деятельности научной организации:

– доходы научной организации;

– расходы научной организации;

– структура внутренних затрат на исследования и разработки.

В настоящей работе рассматриваются только показатели научного потенциала в части публикационной активности и наличия объектов интеллектуальной собственности (прежде всего патентов на научные разработки). Для сравнительной оценки результативности выбранных предприятий использованы предложенные в системе РИНЦ инструменты анализа на базе 11 основных показателей. Эти показатели также входят в число показателей типовой методики оценки результативности деятельности научных организаций, выполняющих научно-исследовательские, опытно-конструкторские и технологические работы гражданского назначения, утвержденной приказом Министерства образования и науки Российской Федерации от 14 октября 2009 г. №406.

В табл.1 представлены данные за 5 лет, начиная с года, предшествующего текущему.

В табл. 1 вошли данные референтной группы из 15 предприятий РКП. Общее количество предприятий, входящих в состав РКП, составляет более 70, но в связи с низкой публикационной активностью в рамках данного исследования рассматривались не все из них. В качестве критерия отбора выбрано количество опубликованных работ за последние 5 лет, которое отражено в РИНЦ. Предварительный анализ показал, что только у небольшого процента предприятий (не более 20%) это количество составляет больше 100.

Из табл. 1 видно, что если по общему количеству публикаций и их цитированию результаты имеются, то по количеству патентов и публикаций в зарубежных журналах активность предприятий крайне низка.

Таблица 1

Наукометрические показатели лучших научных организаций, подведомственных Госкорпорации «Роскосмос»

Источник: составлено авторами по данным РИНЦ на 01.10.2017

При сравнении предприятий РКП России по публикационной активности использовался рейтинговый алгоритм. По каждому показателю проводилось ранжирование, таким образом, что первый номер присваивался предприятию с лучшим значением показателя. Далее выбирались 25% предприятий, имеющих лучшие значения показателя и 25% предприятий, имеющих наихудшие значения для выбранной группы. Для выявления предприятий, лучших с учетом всех показателей, было рассчитано среднее место по всем показателям. Результаты рейтинговой системы сравнения представлены в табл. 2.

Таблица 2

Результаты анализа наукометрических показателей РИНЦ предприятий РКП

В пять лучших предприятий по показателям РИНЦ вошли три головные научно-исследовательские организации отрасли: Центр Келдыша, ЦНИИмаш, НПО «Техномаш». Первое место занимает РКК «Энергия», второе – АО «НПО им. Лавочкина». Высокий рейтинг этих организаций связан с тем , что РКК «Энергия» является признанным мировым лидером в пилотируемой космонавтике и участником крупных международных проектов – «Союз-Аполлон», орбитальная станция «Мир», Международная космическая станция, а АО «НПО им. Лавочкина» – ведущее предприятие РКП, имеющее многолетний опыт выполнения крупных миссий по проведению фундаментальных и прикладных научных исследований космического пространства, объектов ближнего и дальнего космоса, в том числе международных научных программ, разработчик поколений автоматических космических аппаратов для исследований Земли и космоса.

В целях выявления места научных организаций РКП среди других научных организаций Российской Федерации и стран, данные по которым имеются в РИНЦ, использован метод, аналогичный рассмотренному выше. В табл. 3 представлен сравнительный анализ показателей лучшей российской организации РКП – РКК «Энергия» и других научных организаций Российской Федерации, Белоруссии и Казахстана. Из табл. 3 видно, что в группах ведомственных организаций, в корпоративном секторе и научных организациях трёх стран РКК «Энергия» входит в 25% лучших практически по всем показателям, но среди университетов во многом отстает. В целом по всем российским научным организациям, ведомственным НИИ, государственным научным центрам и организациям Российской академии наук (РАН) РКК «Энергия» находится в средней части рейтинга.

Таблица 3

Усредненные показатели, по которым РКК «Энергия» по используемым показателям РИНЦ входит в 25% лучших («+») и 25% худших («-») научных организаций в референтных группах РИНЦ

Сравнительные показатели публикационной активности лучших научных предприятий РКП России и НАСА (само агентство и относящиеся к нему космические и исследовательские центры) приведены в табл. 4. Данные наглядно свидетельствуют о том, что по абсолютному количеству научных публикаций предприятия ракетно-космической отрасли России имеют некоторое преимущество, но по показателям общего числа цитирований публикаций (среднего числа цитирований на одну публикацию и индекса Хирша) организации РКП России значительно уступают НАСА. [3]

Таблица 4

Сравнение публикационной активности научных организаций Госкорпорации «Роскосмос» и структур НАСА

В ходе анализа и оценки научной результативности авторы обратили внимание на то, что, несмотря на требования вышестоящих инстанций, предприятия недостаточно внимания уделяют работе по повышению наукометрических показателей: многие сотрудники не зарегистрированы в наукометрических базах данных, авторы публикаций не имеют привязки к своим организациям, не используются существующие возможности РИНЦ по работе с публикациями авторов и их цитированием, на предприятиях не организованы систематическая работа ответственных представителей по работе с РИНЦ и привлечение авторов к работе со списками своих публикаций. Кроме того, следует отметить низкую библиографическую культуру авторов публикаций, что приводит к большому количеству ошибок, нераспознанным ссылкам, отсутствию идентификации работ и ссылок по отношению к авторам и организациям. В результате имеет место занижение наукометрических показателей по отношению, например, как следует из табл. 3, к университетам, в которых работа с базами данных научного цитирования организована на более высоком уровне.

Для повышения качества и цитируемости научных публикаций разработаны различные методические рекомендации, например, [4]. Рекомендуемые способы повышения цитируемости научных публикаций:

– проведение качественной библиографической работы по тематике НИОКР, изучение источников информации и авторов;

– мониторинг публикаций коллег в рамках тематики исследований, налаживание с ними контактов, обязательные ссылки в своих работах на их труды;

– качественная исследовательская работа, сопровождающаяся подготовкой публикаций в цитируемых журналах, имеющих высокий импакт-фактор и др.

Заключение.

Базы данных научного цитирования являются сегодня практически единственным источником количественного анализа и сравнительной оценки научной результативности деятельности научных организаций. Несмотря на то, что во всем мире РКП является по-прежнему флагманом научного прогресса, обострение конкуренции на рынках наукоемких технологий требует повышения качества и эффективности научных разработок в отрасли. На предприятиях РКП необходимо больше уделять внимания развитию научной сферы деятельности, используя для этого все существующие возможности, что является актуальным в условиях снижения финансирования, необходимости развития диверсификации деятельности и эффективного использования имеющихся компетенций в области разработки новой техники.

[1] Университеты 5/100 (21), Федеральные (10) и Национальные исследовательские (29) университеты

[2] Университеты 5/100 (21), Федеральные (10) и Национальные исследовательские (29) университеты

[3] Данные по публикационной активности структур НАСА рассчитаны за 5 последних лет (2013-2017 гг.). Источник - система Web of Science (www.isiknowledge.com). Данные на 3 октября 2017 года