Интеллектуальные инновационные методы оценки компаний по критериям устойчивого развития

Трифонов Ю.В.1, Брыкалов С.М.2, Трифонов В.Ю.2
1 Национальный исследовательский Нижегородский государственный университет им. Н.И. Лобачевского
2 Опытное конструкторское бюро машиностроения им. И.И. Африкантова, Россия, Нижний Новгород

Статья в журнале

Креативная экономика (РИНЦ, ВАК)
опубликовать статью | оформить подписку

Том 17, Номер 8 (Август 2023)

Цитировать:
Трифонов Ю.В., Брыкалов С.М., Трифонов В.Ю. Интеллектуальные инновационные методы оценки компаний по критериям устойчивого развития // Креативная экономика. – 2023. – Том 17. – № 8. – С. 2705-2720. – doi: 10.18334/ce.17.8.118627.

Эта статья проиндексирована РИНЦ, см. https://elibrary.ru/item.asp?id=54383736

Аннотация:
Обосновывается необходимость применения интеллектуальных инновационных методов получения оценок корпораций, компаний, предприятий, фирм и организаций по критериям устойчивого развития. Рассматриваются основные этапы процесса использования интеллектуальных методов анализа и оценки компаний по критериям устойчивого развития. Формирование оценок предлагается начинать с целеполагания и создания исходной информационной базы получения оценок в виде наиболее значимых для оценки входных индикаторов (показателей). В качестве инструментальных интеллектуальных программных средств получения оценок предлагается использование нейронных сетей с предварительным построением их архитектуры и последующим обучением. Базируясь на построенной и обученной нейронной сети, решение задачи получения оценок сводится к преобразованию вектора входных индикаторов (показателей) в выходной оценочный критериальный вектор, который далее может быть свёрнут в единую критериальную оценку, которая, в частности, может являться рейтингом компании по критериям устойчивого развития. Начальные этапы предлагаемого подхода к получению оценок компаний по критериям устойчивого развития иллюстрируются на примере крупного научно-промышленного предприятия машиностроительного дивизиона Госкорпорации «Росатом».

Ключевые слова: компании, устойчивое развитие, интеллектуальные методы получения оценок

В издательстве открыта вакансия ответственного редактора научного журнала с возможностью удаленной работы
Подробнее...



Введение

Проблемы формального описания функциональной деятельности и получение объективных оценок состояния корпорации, компаний, предприятий, фирм и организаций в настоящее время становятся все более и более актуальными. Отчасти эта актуальность обусловлена тем, что в рамках концепции «Индустрия 4.0» корпорации и компании усиленными темпами создают так называемые цифровые предприятия и цифровые двойники. Большое внимание в рамках цифровизации уделяется вопросам реализации принципов устойчивого развития, в рамках которых решаются многочисленные проблемы экологического и социального характера, а также проблемы, связанные с ответственным корпоративным менеджментом. Фактически ESG-система (Е – экология, S – социальная ответственность, G – ответственное корпоративное управление) становятся неотъемлемой частью как цифровых предприятий, так и систем современного менеджмента [1–7] (Moiseev, 1999; Marfenin, 2002; Kondratenko, 2023; Danilov-Danilyan, Losev, 2000; Bobylyov, 2021).

Становление, внедрение, функционирование и развитие ESG-систем, в рамках которых в полной мере реализуется концепция устойчивого развития, предполагают взаимосвязанное решение целого комплекса задач. Сюда относятся задачи по органичному встраиванию ESG-систем в организационно-управленческие структуры, перестройка и адаптация плановых и управленческих механизмов с учетом соблюдения принципов устойчивого развития, включение в соответствующие системы управления рисками ESG-рисков, трансформация инвестиционной и инновационной деятельности и другие [8–12] (Trifonov, Brykalov, Trifonov, 2019).

При становлении и последующем развитии ESG-систем в компании необходимо проводить работы, связанные с анализом и получением объективных оценок компании по критериям устойчивого развития. Для получения подобных оценок можно использовать различные подходы. Например, можно прибегнуть к услугам различных рейтинговых агентств (внешняя оценка). Однако подобные внешние оценки порой не учитывают отраслевые и региональные особенности компании. Для учета специфики компании при получении объективных оценок целесообразно использование собственных внутренних методик. Различные подходы к конструированию подобных методик, направленных на анализ и оценку компаний по критериям устойчивого развития, изложены в [13–17] (Netronin, Brykalov, Kuznetsova, 2021; Trifonov, Brykalov, Trifonov, 2022; Trifonov, Brykalov, Trifonov, 2022; Trifonov, Shesterikova, Utkina, 2022; Trifonov, Brykalov, Trifonov, 2020).

Тем не менее целый ряд проблем, связанных со становлением ESG-систем, остаются нерешенными.

Научная новизна заключается в том, что авторами предложена оригинальная методология поэтапного механизма комплексной оценки уровня зрелости ESG-системы предприятия с применением интеллектуальных методов.

Целью данной статьи является описание основных этапов получения объективных оценок компании по критериям устойчивого развития на базе инструментального аппарата нейронных сетей и разработка общих подходов и практических рекомендаций по реализации процессов оценочной деятельности, направленных на получение интеллектуальных оценок.

Материалы и методы исследования

Для многих корпораций, компаний, предприятий, фирм и организаций учет и соблюдение принципов устойчивого развития при реализации их функциональной деятельности становится насущной необходимостью, поскольку следование этим принципам несет целый ряд инвестиционных, инновационных и имиджевых эффектов. Степень соответствия компаний основным критериям устойчивого развития чаще всего определяется путем получения конкретных оценок в виде рейтингов, рангов и других измерителей. Оценка корпораций и компаний на предмет соответствия критериям устойчивого развития обычно производится многочисленными рейтинговыми агентствами, отраслевыми, ведомственными и другими структурами. Исходная информационная база по процедуре получения оценок и применяемым методикам расчетов, остаются прерогативой тех организаций и структур, которые производят соответствующую оценку, причем в этой области наблюдается большая неопределенность и широкий диапазон применяемых методик и подходов. Чаще всего при формировании оценок используются четкие алгоритмические процедуры, которые можно описать, формализовать и затем реализовать.

Однако информация, используемая при получении оценок, чаще всего слабо структурирована, имеет расплывчатый и неполный характер, может содержать неопределенности и неточности. То же самое можно сказать и о процедурах получения оценок, в которых практически невозможно выделить единые формализованные правила (о чем свидетельствует разнообразие методологий, применяемых различными рейтинговыми агентствами).

На наш взгляд, в этих условиях целесообразно использование интеллектуальных методов получения оценок. В настоящее время имеется достаточно обширный арсенал инструментальных программных средств, с помощью которых реализуются интеллектуальные методы, но наиболее предпочтительными средствами получения оценок являются те программные средства, которые используют в своей работе концепцию нейронных сетей. Практическое использование нейронных сетей имеет свои отличительные свойства, которые необходимо учитывать. В частности, необходимым этапом процесса применения нейронных сетей является этап, связанный с их предварительным обучением. Для того чтобы провести подобное обучение, необходимо сформировать множество «правильных» входных примеров (образцов). Это множество является прямым отражением того успешного опыта и знаний, которые применялись ранее при решении той или иной задачи (в нашем случае – задачи получения оценки по критериям устойчивого развития). В том случае, когда имеется статистическая информация, связанная с предыдущими успешными решениями задачи получения оценок, использование нейронных сетей вполне оправдано и целесообразно.

При использовании интеллектуальных методов получения оценок компаний по критериям устойчивого развития можно применить универсальный подход к интеллектуальному анализу, оценке систем различного типа, предложенной нами в [15–17] (Trifonov, Brykalov, Trifonov, 2022; Trifonov, Shesterikova, Utkina, 2022; Trifonov, Brykalov, Trifonov, 2020). Этот подход в различных вариациях использован нами для экономических систем различного типа: управленческих, маркетинговых и т.д. В последнее время во многих передовых корпорациях и компаниях формируются и функционируют системы (подсистемы), в рамках которых аккумулируется вся работа и функциональная деятельность по становлению, созданию, внедрению, функционированию и долгосрочному развитию концепции устойчивого развития (ESG-система). Неотъемлемой частью работ в рамках ESG-систем является процесс получения ESG-оценок, в котором также могут быть использованы интеллектуальные методы анализа и оценки.

Отдельные этапы процесса использования интеллектуальных методов анализа и оценки компании по критериям устойчивого развития представлены на рисунке 1.


Этап 1
Целеполагание процесса получения оценок по критериям устойчивого развития


ß


Этап 2
Идентификация и описание ESG-системы с привязкой к функциональной деятельности и стратегии развития компании


ß


Этап 3
Формирование исходной информационной базы получения оценок по критериям устойчивого развития с установкой наиболее значимой для оценки входных индикаторов (показателей)


ß


Этап 4
Определение основных выходных составляющих по критериям устойчивого развития


ß


Этап 5
Формирование обучающих и тестирующих множества «правильных» примеров (образцов)


ß


Этап 6
Построение исходной архитектуры нейронной сети с ее последующим усовершенствованием


ß


Этап 7
Обучение нейронной сети с целью решения задачи получения оценок по критериям устойчивого развития


ß


Этап 8
Решение задачи получения оценок для конкретной компании, выявление наиболее существенных для оценок входных индикаторов


ß


Этап 9
Разработка стратегических рекомендаций по улучшению оценок компании по критериям устойчивого развития

Рисунок 1. Основные этапы процесса получения оценок компании по критериям устойчивого развития с использованием нейронных сетей

Источник: составлено авторами.

Рассмотрим содержание отдельных этапов процесса получения оценок компаний по критериям устойчивого развития с использованием нейронных сетей более детально.

Непосредственно перед процессом получения оценок необходимо определить, в каких целях в дальнейшем будут использоваться эти оценки. Прежде всего, для крупных корпораций и компаний важна внутренняя оценка, связанная с реализацией и соблюдением принципов устойчивого развития. Внутренние оценки помогают реально и адекватно оценить состояние дел в экологической, социальной сферах и сфере ответственного корпоративного менеджмента. Затем в текущие и стратегические планы компании должны быть включены различные мероприятия, направленные на улучшение позиций компании по критериям устойчивого развития. Впоследствии текущая функциональная деятельность компании должна предусматривать работы, связанные с мониторингом и контролем исполнения планов по улучшению ESG-критериев.

Внешние оценки компаний по критериям устойчивого развития могут быть получены в ходе мониторинга вышестоящими отраслевыми и региональными структурами, различными независимыми рейтинговыми агентствами и т.д. Целью получения и использования внешних оценок являются инвестиционные, инновационные и имиджевые преференции, связанные с получением финансовых средств, заключением различного рода контрактов и т.д.

Второй аспект, касающийся вопросов целеполагания, относится к определению тех целей, которые должны быть зафиксированы для компании для трех основных критериев устойчивого развития: экологического, социального и критерия эффективного корпоративного менеджмента. Поскольку цели устойчивого развития компании в дальнейшем коррелируются с информационными показателями (индикаторами), получения оценок, вопросам целеполагания должно быть уделено самое пристальное внимание, особенно в случаях, когда производится внутренняя оценка по трем основным критериям устойчивого развития. Крайне важным шагом процесса получения ESG-оценок является этап, связанный с определением наиболее значимых для оценок входных индикаторов (показателей). Входные индикаторы (показатели) должны быть привязаны как к целям устойчивого развития компаний, так и к некоторым показателям и характеристикам текущей функциональной деятельности, а в некоторых случаях к показателям тактических и стратегических планов.

Конечным итогом формирования входных (индикаторов) показателей должен являться входной вектор индикаторов:

.

На начальном этапе размерность этого вектора может быть достаточно велика. Но в дальнейшем, используя возможности современных программных средств и, в частности, возможности нейронных сетей, число входных индикаторов можно сократить, оставляя для проведения интеллектуального анализа и оценки лишь те входные индикаторы, которые существенно влияют на оценки компании по критериям устойчивого развития.

В число входных индикаторов (показателей) могут быть включены как количественные, так и качественные индикаторы. Однако качественные показатели в целях дальнейшей компьютерной обработки должны быть оцифрованы и нормированы. Процедура нормирования также должна быть проведена и для количественных индикаторов.

При определении основных выходных составляющих по критериям устойчивого развития необходимо исходить из того, что эти составляющие должны характеризовать объективное состояние компании на предмет ее соответствия критериям устойчивого развития. В общем случае это соответствие можно формально представить в виде следующего выходного критериального вектора:

.

Отдельная компонента вектора отражает отдельную характеристику на предмет соответствия компании критериям устойчивого развития.

В дальнейшем компоненты вектора могут быть преобразованы в конкретные значения , соответствующие трем основным составляющим концепции устойчивого развития (Е – экология, S – социум, G – эффективное корпоративное управление).

Далее числовые значения могут быть свернуты в единую интегральную оценку , которая отражает целостное соответствие компании критериям устойчивого развития.

Интегральная оценка может, в частности, являться рейтингом компании или же каким либо другим аналогичным измерителем.

Формирование обучающих и тестирующих примеров (образцов), построение архитектуры нейронной сети и ее обучение в большей степени относится к технической стороне процесса получения оценок по критериям устойчивого развития. Отметим, что при реализации этих этапов основной проблемой является подготовка и передача исходной информации, поскольку от ее достоверности во многом зависит качество решения задачи получения оценок по критериям устойчивого развития.

Базируясь на построенной нейронной сети, непосредственное решение задачи получения оценок компании по критериям устойчивого развития фактически сводится к следующему преобразованию:

или

.

При этом нейронная сеть является своеобразным «черным ящиком», внутри которого реализуется преобразование F. В этом заключается основное преимущество использования нейронной сети перед обычными алгоритмическими процедурами преобразования вектора в критериальный вектор .

Построенную и протестированную нейронную сеть в дальнейшем можно использовать для выявления наиболее значимых входных индикаторов (показателей), а также для разработки стратегических мероприятий и рекомендаций по улучшению оценок компаний по критериям устойчивого развития.

Результаты исследования и их обсуждения

Проведенное исследование опыта использования интеллектуальных инструментальных средств в виде нейронных сетей для получения оценок компаний по критериям устойчивого развития показал, что большинство применяемых методологий получения оценок компаний по ESG-критериям опираются на использование традиционных методов расчетов, основой которых являются четкие формальные математические или информационно-логические алгоритмы. При этом входная информация, используемая для расчетов, структурирована, а входные индикаторы (как количественные, так и качественные) непосредственно перед расчетами имеют цифровую форму. Поэтому можно фиксировать, что подавляющее большинство применяемых методологий получения оценок по критериям устойчивого развития имеют четкий структурированный характер как с точки зрения использования входной информации, так и с точки зрения применяемых методов расчета.

В то же время четкая формализация как входной информации, так и методов расчетов при получении оценок по критериям устойчивого развития не всегда применима. В подобных случаях целесообразно использование интеллектуальных средств получения оценок и, в частности, нейронных сетей. При применении нейронных сетей можно выявить наиболее или наименее значимые входные индикаторы, влияющие на получение конечных оценок. Что очень существенно, непосредственный процесс (алгоритм) получения оценок носит неявный характер, так как «скрыт» внутри построенной после обучения архитектуры нейронной сети.

В конечном итоге интеллектуальные методы позволяют получить более независимые и точные оценки компании по критериям устойчивого развития.

Проиллюстрируем некоторые аспекты применения методов получения оценок по критериям устойчивого развития на примере организаций машиностроительного дивизиона Госкорпорации «Росатом» и, в частности, на АО «ОКБМ Африкантов». Это крупное научно-производственное предприятие является ключевым изготовителем и поставщиком реакторного оборудования в составе машиностроительного дивизиона Госкорпорации. Вполне естественно, что АО «ОКБМ Африкантов» в своих собственных разработках опирается на единые отраслевые методические указания, материалы и документы в области устойчивого развития.

В 2022 году была проведена пилотная оценка АО «ОКБМ Африкантов» в области ESG. С учетом установленных оценочных критериев была получена оценка подверженности рисков по каждому ESG-фактору/подфактору и на ее основе определен общий уровень митигации (управления рисками) с целью выявления областей с высоким уровнем риска (табл. 1).

Таблица 1

Пример определения веса рисков и уровня митигации по ESG-факторам АО «ОКБМ Африкантов»

№ п/п
Фактор
Вес риска по фактору*, %
Подфактор
Вес риска по подфактору*,%
Уровень митигации рисков*, балл (1–100)
E
Enviromental
40%



1
Природные ресурсы
14%
Водопользование
3%
74
Биоразнообразие
3%
8
Использование энергии
6%
42
Конфликтные/спорные материалы
2%
7
2
Загрязнение окружающей среды
11%
Управление отходами и переработка отходов
3%
60
Образование загрязняющих веществ
5%
79
Экологическая ответственность за продукцию
3%
84
3
Изменение климата
8%
Углеродный след
4%
71
Адаптация к изменениям климата
2%
10
Возобновляемая энергия
2%
7
4
Общие экологические риски
7%
Взаимодействие с заинтересованными сторонами
4%
81
Цепочка поставщиков
3%
53
S
Social
40%



5
Человеческий капитал
15%
Трудовые практики
4%
86
Охрана здоровья и безопасность труда
7%
43
Привлечение и удержание талантов
2%
76
Гендерное равенство и инклюзивность
2%
40
6
Корпоративная социальная ответственность
15%
Социальные льготы
6%
82
Местные сообщества
3%
12
Права человека
6%
70
7
Общие социальные риски
10%
Цепочка поставщиков
2%
46
Безопасность и качество продукции
4%
88
Конфиденциальность данных и кибербезопасность
4%
72
G
Governance
20%



8
Корпоративная структура
10%
Структура Совета директоров и прозрачность
2%
81
Структура собственности
2%
76
Управление рисками
6%
76
9
Корпоративное поведение
10%
Деловая этика, восприятие коррупции
4%
47
Антимонопольные практики
4%
71
Налоговые платежи и прозрачность
2%
95
* Весовые значения рисков по факторам/подфакторам, уровни митигации рисков приведены в качестве примера
Источник: составлено авторами.

Экспертная оценка ESG-рисков по АО «ОКБМ Африкантов», полученная по данной методике, представлена на рисунке 2.

Рисунок 2. Карта ESG-рисков АО «ОКБМ Африкантов»

Источник: составлено авторами.

Итоговая ESG-оценка предприятия составила 75 баллов, что демонстрирует продвинутый уровень зрелости ESG-системы, при этом значительный прогресс наблюдается в области корпоративного управления (рис. 3).

Рисунок 3. Итоговая ESG-оценка АО «ОКБМ Африкантов»

Источник: составлено авторами.

Учитывая тот факт, что АО «ОКБМ Африкантов» имеет свои характеристики и особенности, а также с учетом выявленных ESG-рисков, на предприятии проводится комплекс системных работ, направленных на адаптацию отраслевых документов к учету специфики построения и функционирования предприятия.

Особое внимание на предприятии отводится проблемам целеполагания и создания исходной информационной базы получения оценок по критериям устойчивого развития. Были зафиксированы четыре приоритетных цели устойчивого развития и тринадцать целей, встроенных в текущую функциональную деятельность. В качестве приоритетных целей были отмечены следующие:

1) индустриализация, инновация и инфраструктура;

2) достойная работа и экономический рост;

3) недорогостоящая и чистая энергия;

4) борьба с изменением климата.

Опираясь на зафиксированные цели, была разработана внутренняя система индикаторов, которая позволяет сформировать исходную информационную базу получения оценок по критериям устойчивого развития.

Для непосредственного получения текущих и стратегических оценок по критериям устойчивого развития на предприятии создана методика оценочных индикаторов, позволяющая проанализировать и выявить как сильные, так и слабые позиции в области соблюдения принципов устойчивого развития.

Фактически на предприятии разработаны и реализуются начальные этапы методик получения оценок с помощью интеллектуальных методов. Развитие этих методик должно быть направлено на решение вопросов, связанных со сбором соответствующей статистики для формирования множества обучающих примеров, а также на построение и дальнейшее использование инструментария нейронных сетей уже непосредственно для получения интеллектуальных оценок по критериям устойчивого развития.

Заключение

В настоящее время можно констатировать, что проблема оценки различного рода систем (экономических, управленческих и других) становится весьма актуальной при осуществлении функциональной деятельности и разработка стратегии развития корпораций, компаний, предприятий, фирм и организаций. Решение этой проблемы необходимо, прежде всего, для реального позиционирования компании во внешней и внутренней среде и реализации мероприятий, направленных на улучшение текущего состояния компании в будущем.

Проблема оценки компаний по критериям устойчивого развития является частью общей проблемы оценки систем и предприятий. При решении этой частной проблемы применяются достаточно традиционные структурированные информационно-логические и математические методы. Однако более перспективным и точным с точки зрения получения независимых и достоверных оценок являются методы, использующие интеллектуальные инструментальные средства и, в частности, средства, базирующиеся на применении нейронных сетей.

Полученные с помощью нейронных сетей оценочные критериальные индикаторы (показатели) позволяют в конечном итоге разработать и реализовать в текущей и долгосрочной перспективе те мероприятия, которые способствуют в компании соблюдению и реализации принципов устойчивого развития.


Источники:

1. Моисеев Н.Н. Быть или не быть… человечеству?. - М., 1999. – 288 c.
2. Марфенин Н.Н. Концепция «устойчивого развития» в развитии. / Россия в окружающем мире: 2002. Аналитический ежегодник. - М.: Изд-во МНЭПУ, 2002. – 126-176 c.
3. Кондратенко М. ESG-принципы: что это такое и зачем компаниям их соблюдать. Рбк. [Электронный ресурс]. URL: https://trends.rbc.ru/trends/green/614b224f9a7947699655a435 (дата обращения: 15.02.2023).
4. ESG-(Р) Эволюция. Конгресс ответственного бизнеса. Esg.rbc.ru. [Электронный ресурс]. URL: https://esg.rbc.ru/ (дата обращения: 15.02.2023).
5. Официальный сайт журнала Forbes. [Электронный ресурс]. URL: https://www.forbes.ru/obshchestvo/425081-ustoychivoe-razvitie-chto-eto-takoe-i-v-chem-ego-znachimost (дата обращения: 15.02.2023).
6. Данилов-Данильян В.И., Лосев К.С. Экологический вызов и устойчивое развитие. / Учебное пособие. - М.: Прогресс-Традиция, 2000. – 416 c.
7. Бобылёв С.Н. Экономика устойчивого развития. - М.: Кнорус, 2021. – 672 c.
8. Официальный сайт Организации Объединенных Наций. [Электронный ресурс]. URL: https://www.un.org/sustainabledevelopment/energy/ (дата обращения: 15.02.2023).
9. Трифонов Ю.В., Брыкалов С.М., Трифонов В.Ю. Интеграция систем планирования с системами управления рисками на крупных предприятиях // Стратегические решения и риск-менеджмент. – 2019. – № 2. – c. 122-132. – doi: 10.17747/2618-947X-2019-2-122-132.
10. Отчет Государственной корпорации по атомной энергии «Росатом» о прогрессе в области устойчивого развития за 2020 год. Report.rosatom.ru. [Электронный ресурс]. URL: https://www.report.rosatom.ru/go/2020/rosatom_esg_2020.pdf (дата обращения: 15.02.2023).
11. ESG рэнкинг российских компаний RAEX-Europe (по состоянию на 16.09.2021). Raex-a.ru. [Электронный ресурс]. URL: https://raex-a.ru/rankingtable/ESG_ranking_companies/16/09/2021 (дата обращения: 15.02.2023).
12. Публичный отчет «Итоги деятельности Государственной корпорации по атомной энергии «Росатом» за 2020 год». Report.rosatom.ru. [Электронный ресурс]. URL: https://www.report.rosatom.ru/go/2020/rosatom_2020.pdf (дата обращения: 15.02.2023).
13. Нетронин И.В., Брыкалов С.М., Кузнецова Н.А. Реализация концепции устойчивого развития на предприятиях атомной отрасли (на примере АО «ОКБМ Африкантов») // Управление устойчивым развитием. – 2021. – № 5(36). – c. 37-46.
14. Трифонов Ю.В., Брыкалов С.М., Трифонов В.Ю. Эволюция концепции устойчивого развития компаний // Фундаментальные исследования. – 2022. – № 6. – c. 61-66. – doi: 10.17513/fr.43272.
15. Трифонов Ю.В., Брыкалов С.М., Трифонов В.Ю. Реализация концепции устойчивого развития компаний // Креативная экономика. – 202216. – № 7. – c. 2679-2696. – doi: 10.18334/ce.16.7.115022.
16. Трифонов Ю.В., Шестерикова Н.В., Уткина А.Ф. Этапы реализации концепции устойчивого развития компаний // Вестник Алтайской академии экономики и права. – 2022. – № 9-3. – c. 427-432. – doi: 10.17513/vaael.2492.
17. Трифонов Ю.В., Брыкалов С.М., Трифонов В.Ю. Оценка состояния экономических систем по различным критериям // Фундаментальные исследования. – 2020. – № 3. – c. 107-112. – doi: 10.17513/fr.42708.

Страница обновлена: 13.04.2024 в 08:31:39