Оценка уровня инновационного развития региона в контексте экономической безопасности на основе нейросетевого моделирования

Борисов С.А.1 , Соменкова Н.С.1
1 Национальный исследовательский Нижегородский государственный университет им. Н.И. Лобачевского, Нижний Новгород, Россия

Статья в журнале

Экономическая безопасность (РИНЦ, ВАК)
опубликовать статью | оформить подписку

Том 9, Номер 7 (Июль 2026)

Цитировать эту статью:

Аннотация:
С учетом глобальных тенденций, связанных с ускорением технологического прогресса и значимости инноваций для обеспечения экономической безопасности регионов, повышение уровня инновационного развития является одной из ключевых целей развития страны. В статье представлены основные методики, используемые для оценки уровня инновационного развития в российских регионах. Анализируются факторы, оказывающие влияние на уровень инновационного развития в регионах, рассматриваются статистические характеристики этих факторов, такие как: средние значения, мода, медиана, асимметрия и эксцесс. С помощью технологий искусственного интеллекта проведена кластеризация субъектов Российской Федерации по показателям инновационного развития. В рамках данного исследования использовались самоорганизующиеся карты Кохонена (СОК) в качестве инструмента искусственного интеллекта. Регионы были разделены на четыре кластера, представлены их состав и характеристики, отражающие уровень инновационного развития. Исследование показало, что шесть регионов, среди которых г. Москва, г. Санкт-Петербург и Нижегородская область, обладают высоким уровнем инновационного развития, что делает эти регионы лидерами и эталонами по сравнению с регионами из других кластеров. На основе полученного распределения регионов по кластерам авторы разработали предложения по повышению уровня инновационного развития и уменьшения инновационного неравенства между регионами-лидерами и отстающими регионами. Результаты данного исследования могут быть использованы при совершенствовании стратегии региона в части инновационного развития с учетом их кластерной принадлежности

Ключевые слова: инновационное развитие региона, инновационный индекс, искусственный интеллект, самоорганизующиеся карты Кохонена, экономическая безопасность

JEL-классификация: O38, R11, O30, C63, H56

JATS XML



Введение

В условиях глобальной конкуренции и технологического прогресса инновационное развитие признанно одним из ключевых направлений обеспечения экономической безопасности регионов и страны в целом. Внедрение инноваций позволяет предприятиям оптимизировать бизнес-процессы, снижать затраты, обеспечивает экономический рост региона.

Основными задачами технологического развития страны является переход к экономике, ориентированной на инновации и повышение значения технологий как движущей силы экономического роста.

Следует отметить, что исследования инновационного развития регионов нашли достаточное отражение в научных работах российских авторов.

Методические подходы к оценке уровня инновационного развития регионов представлены в работах Грачева С. А., Вакуленко О. С. [1], Егорова Н. Е., Васильевой Н. В. [2], Митуса А.А., Гармашовой Е. П., Баранова А. Г., Дребот А. М. [3], Печаткина В.В. [4], Шалаевой Л. В. [5].

Влияние инноваций на повышение конкурентоспособности и обеспечение экономической безопасности рассматривалось в трудах Борисова С.А., Захаровой Ю.В., Соменковой Н.С. и Яшина С. Н. [6, 7, 8].

В исследованиях [9, 10] определены индикаторы экономической безопасности и их влияние на уровень инновационного развития.

Отсутствие единого комплексного подхода и выявленные недостатки существующих методик подчеркивают актуальность и практическую значимость разработки новой методики оценки инновационного развития регионов.

Цель исследования заключается в оценке уровня инновационного развития регионов Российской Федерации с использованием нейросетевого моделирования и разработке предложений по его повышению.

Научная новизна исследования состоит в том, что для анализа уровня инновационного развития регионов применяется метод кластеризации с использованием технологий искусственного интеллекта, в частности, самоорганизующихся карт Кохонена.

В рамках исследования выдвинута гипотеза о наличии связи между затратами на инновационную деятельность и уровнем инновационного развития региона. Для достижения поставленных задач использовались методы системного анализа и нейросетевое моделирование, основанное на самоорганизующихся нейронных сетях.

Основной информационной базой послужили данные, предоставленные Федеральной службой государственной статистики.

Основная часть

Обзор методик оценки уровня инновационного развития регионов

На сегодняшний день Российская Федерация демонстрирует достаточно высокие результаты в международных рейтингах инновационного развития. В 2024 году Россия заняла 9-е место из 130 стран по числу зарегистрированных патентов, 38-е место по индексу готовности правительств к искусственному интеллекту среди 181 страны, 40-е место по индексу развития информационно-коммуникационных технологий из 170 стран, 59-е место по глобальному индексу инноваций (ГИИ) среди 133 стран (рис.1).

Рисунок 1. Положение Российской Федерации в мировых рейтингах инновационного развития в 2024 году

Источник: составлено авторами по данным [11, 12, 13].

Положение Российской Федерации в Глобальном инновационном индексе 2024 года (ГИИ-2024) по различным компонентам инновационного индекса представлено на рис.2.

Рисунок 2. Положение Российской Федерации в ГИИ-2024 по компонентам инновационного индекса

Источник: составлено авторами по данным [12].

Согласно данным ГИИ-2024 сильными сторонами инновационной системы России выступают компоненты: человеческий капитал и наука (39-е место), знания и технологии (52-е место), развитие бизнеса (53-е место) и креативные индустрии (53-е место). В то же время, аспекты, снижающие успешность инновационной деятельности в стране, включают развитие рынка (57-е место), инфраструктуру (76-е место), институты (176-место) [12].

В 2024 году объем внутренних затрат на исследования и разработки в России достиг 1,88 трлн. рублей, увеличившись за год на 235,1 млрд. рублей в действующих ценах, или на 4,5% в пересчете в постоянные цены.

По абсолютным масштабам затрат на науку Россия занимает девятую позицию в мировом рейтинге. Лидируют США, Китай и Япония.

Анализ международных рейтингов инновационного развития России показывает, что страна достигла значительного прогресса в области человеческого капитала, знаний и технологий, в то же время отмечаются существенные проблемы, включая инвестиции в НИОКР и условия осуществления инновационной деятельности. Однако, экономика сталкивается с серьезными вызовами в других аспектах, включая уровень инвестиций в НИОКР и условия для инновационной активности. В условиях высокой глобальной конкуренции и необходимости адаптации к быстро меняющимся технологическим условиям становится очевидной необходимость активной государственной инновационной политики.

В отечественной литературе представлены различные подходы к оценке уровня инновационного развития российских регионов: индексный метод, модели кластерного анализа, модели многокритериальной оценки, эконометрические модели. Наибольшее распространение получил индексный метод оценки инновационного развития регионов, на основе которой формируются рейтинги территорий.

Среди различных инновационных рейтингов в России, стоит отметить рейтинг инновационного развития субъектов Российской Федерации, подготовленный Высшей школой экономики. Этот рейтинг основан на 55 ключевых показателях, которые распределены по пяти блокам: социально-экономические условия для реализации инновационной деятельности; научно-технические ресурсы; инновационная деятельность; экспортная динамика; эффективность инновационной политики. Лидерами рейтинга стали Москва, Санкт-Петербург и Республика Татарстан (рис.3).

Рисунок 3. Регионы-лидеры по значению российского регионального инновационного индекса (РРИИ) в 2024 году

Источник: составлено авторами по данным [14].

Регионы-лидеры российского регионального инновационного индекса по тематическим индексам в 2024 году представлены на рис.4.

Рисунок 4. Регионы-лидеры российского регионального инновационного индекса по тематическим индексам в 2024 году

Источник: составлено авторами по данным [14].

Ассоциация инновационных регионов России разработала Региональную шкалу оценивания инновационного развития. Эта шкала опирается на 24 ключевых показателя, по которым рассчитываются индексы в шести различных направлениях: кадровый потенциал для инновационного развития; финансовая поддержка инновационных инициатив; состояние инфраструктуры для инноваций; проведение научных исследований и создание технологических решений; трансфер технологий и коммерциализация разработок; социально-экономические эффекты [15]. Исходя из полученных значений индексов, регионы подразделяются на пять категорий: очень высокий уровень инновационного развития, развития высокий уровень, средний уровень, ниже среднего уровня, низкий уровень.

В исследовании Митуса А.А. с соавторами представлена методология формирования сводного индекса инновационного развития регионов [3]. Этот индекс рассчитывается как среднее арифметическое четырех подиндексов: индекса инновационной инфраструктуры, индекса научно-технического потенциала региона, индекса производственно-технологического потенциала и индекса региональной инновационной политики. Для расчетов подиндексов использовались нормированные показатели по 26 параметрам, отражающим разнообразные аспекты инновационного развития регионов. Основываясь на данной методике, была проведена типологизация регионов с низким, средним и высоким уровнями инновационного развития.

Интерес представляют также методические подходы, разработанные Печаткиным В. В., которые позволяют оценить уровень инновационного развития региона с точки зрения эффективности инновационной политики [4]. Эта методология включает 19 показателей, разделенных на три блока:

1. Ресурсное обеспечение инновационного развития (оценка осуществляется по 7 показателям);

2. Инновационная и изобретательская активность (оценка по 4 показателям);

3. Результативность инновационной деятельности (оценка по 8 показателям).

В результате данной методики регионы были классифицированы на четыре группы: инновационные лидеры (с показателями более 120 % от среднего уровня по России); сильные инноваторы (90 -120 %); средние инноваторы (50 – 90 %); скромные инноваторы (менее 50 %).

Проведенное исследование показало, что требуется комплексный подход к оценке уровня инновационного развития региона, который учитывает различные аспекты инновационной деятельности, включая финансирование инновационной деятельности.

Результаты нейросетевого моделирования

инновационного развития российских регионов

В качестве исходных данных для оценки уровня инновационного развития российских регионов использовались данные за 2024 год по 85 субъектам РФ, полученные из официальных данных Федеральной службы государственной статистики [16]:

П1 - уровень инновационной активности организаций в 2024 году, %.

П2 - удельный вес организаций, осуществляющих технологические инновации в 2024 году, %

П3 - удельный вес затрат на инновационную деятельность в 2024 году, %

П4 - затраты на инновационную деятельность организаций в 2024 году, млн. руб.

П5 - внутренние затраты на НИР в 2024 году, млн. руб.

В качестве отчетного периода был выбран 2024 год из-за того, что на текущий момент времени еще не полностью сформирована статистическая отчетность за 2025 год.

Для проведения анализа в соответствии с теорией нейронных сетей все параметры были определены как входные, а на выходе получается карта Кохонена. Ячейки данной карты свидетельствуют об уровне регионального инновационного развития.

Методика исследования предполагает выполнение серии последовательных шагов.

Шаг 1. Определение статистических характеристик исходных данных. Результаты анализа на данном этапе представлены в табл.1.

Таблица 1. Статистические характеристики распределения регионов по показателям П1-П5

Среднее значение
10,24582053
19,97299495
1,62971
54099,52876
22058,3603
Мода
6,666666667
14,28571429
-
0
0
Медиана
9,174311927
19,26406926
1,13217
9589,2587
2918,0743
Размах
32,06080242
42,94179927
6,86215
1628038,231
670681,71
Дисперсия
28,38642911
62,16011055
2,64602
34087610663
6226480376
Среднеквадратическое отклонение
5,32789162
7,884168349
1,62666
184628,3041
78908,0501
Асимметрия
1,425720987
1,348273947
1,47126
7,541251428
6,96598165
Эксцесс
3,990912159
2,965977872
1,82696
63,11882018
54,7038591
МАКС
34,14080242
50,19255456
6,8628
1628038,231
670681,71
МИН
2,08
7,250755287
0,00065
0
0
Источник: составлено авторами на основе данных [16].

Шаг 2. Построение самоорганизующейся карты Кохонена.

Шаг 2 осуществляется на базе специализированного программного обеспечения - аналитического пакета Deductor Academic. Важно отметить еще раз, что все показатели П1-П5 являются входными, а результатом анализа являются кластеры, характеризующие инновационное развитие регионов (рис.5).

Рисунок 5. Кластеризация регионов по уровню инновационного развития регионов

Источник: Составлено авторами на основе данных [16].

Шаг 3. Определение состава и структуры кластеров.

Всего в кластеры попало 85 регионов без учета «новых регионов РФ», таких как: ДНР, ЛНР, Херсонская и Запорожская области. Данные регионы не вошли в анализ, так как по ним на данный момент времени не сформирована необходимая статистическая база для его проведения.

Кластер 1 (46 регионов): Амурская область, Архангельская область, Архангельская область (кроме Ненецкого автономного округа), Брянская область, Волгоградская область, Вологодская область, Еврейская автономная область, Забайкальский край, Ивановская область, Кабардино-Балкарская республика, Камчатский край, Карачаево-Черкесская республика, Кемеровская область-Кузбасс, Костромская область, Краснодарский край, Красноярский край, Курская область, Магаданская область, Мурманская область, Ненецкий автономный округ (Архангельская область), Новгородская область, Омская область, Оренбургская область, Приморский край, Республика Адыгея, Республика Алтай, Республика Бурятия, Республика Дагестан, Республика Ингушетия, Республика Калмыкия, Республика Карелия, Республика Коми, Республика Саха (Якутия), Республика Северная Осетия-Алания, Республика Тыва, Республика Хакасия, Саратовская область, Сахалинская область, Смоленская область, Ставропольский край, Тамбовская область, Тюменская область, Ханты-Мансийский автономный округ - Югра, Чеченская Республика, Чукотский автономный округ, Ямало-Ненецкий автономный округ.

Кластер 2 (28 регионов): Алтайский край, Астраханская область, Белгородская область, Владимирская область, Воронежская область, г. Севастополь, Калужская область, Кировская область, Курганская область, Ленинградская область, Липецкая область, Новосибирская область, Орловская область, Пензенская область, Пермский край, Псковская область, Республика Башкортостан, Республика Марий Эл, Республика Мордовия, Рязанская область, Самарская область, Свердловская область, Тверская область, Тульская область, Удмуртская Республика, Ульяновская область, Челябинская область, Чувашская Республика.

Кластер 3 (7 регионов): Иркутская область, Калининградская область, Республика Крым, Томская область, Тюменская область (кроме Ханты-Мансийского автономного округа), Хабаровский край, Ярославская область.

Кластер 4 (6 регионов): г. Москва, г. Санкт-Петербург, Московская область, Нижегородская область, Республика Татарстан, Ростовская область.

Шаг 4. Формулирование выводов и предложений на основе проведенного анализа.

На основании полученных в результате нейросетевого анализа данных можно сделать следующие выводы:

1. В результате анализа были выделены два кластера с наибольшими значениями П1-П5, которые мы причисляем к «лидерам» инновационного развития. Они получились самыми немногочисленными среди всех кластеров, в них вошли 6 (кластер 3) и 7 (кластер 4) регионов соответственно.

2. Если сравнивать между собой кластеры 3 и 4, то регионы кластера 3 превосходят регионы кластера 4 по показателям П1-П2 и П5, но отстают по показателям П3 и П4. Это означает, что регионам кластера 3 нужно увеличить затраты на инновационную деятельность в структуре общих затрат, начиная с 2025 года, а регионам кластера 4 требуется повысить уровень инновационной активности, увеличить количество организаций, осуществляющих технологические инновации и увеличить внутренние затраты на НИР.

3. Для всех остальных регионов, входящих в кластеры 1 и 2, рекомендуется совершенствование всех показателей, рассмотренных в ходе данного анализа. Для того, чтобы данным регионам приблизиться к «лидерам» требуется: повышение уровня их инновационной активности, увеличение количества организаций, осуществляющих технологические инновации, повышение затрат на инновационную деятельность в общей структуре затрат, повышение внутренних затрат на НИР.

Заключение

Анализ кластерного распределения регионов свидетельствует о потребности в разработке стратегий, направленных на сокращение различий в уровне инновационного развития, что, в свою очередь, будет способствовать более равномерному экономическому развитию всей страны.

Исходя из результатов кластеризации, авторы предлагают ряд мероприятий, которые помогут снизить различия в инновационном развитии между регионами-лидерами и отстающими регионами:

1. Увеличение объемов финансирования НИОКР (софинансирование расходов предприятий на НИОКР из федерального и регионального бюджетов, развитие государственно-частного партнерства, создание региональных фондов поддержки инноваций);

2. Развитие человеческого капитала (реализация программ подготовки кадров по технологии искусственного интеллекта, робототехнике, биотехнологиям);

3. Развитие инновационной инфраструктуры во всех российских регионах (создание и развитие региональных технопарков, индустриальных парков, центров компетенций и инновационных кластеров, создание региональных координационных центров по развитию инноваций (партнерство вузов, бизнеса и власти));

4. Совершенствование мер государственной поддержки малых инновационных предприятий (предоставление грантов и субсидий для малых инновационных предприятий, льготное кредитование на закупку оборудования и инновационных технологий).

5. Разработка методики отбора инновационных предприятий в целях предоставления мер государственной поддержки.

Полученные результаты данного исследования могут быть использованы при совершенствовании стратегии региона в части инновационного развития с учетом их кластерной принадлежности.


Источники:

1. Грачев С. А., Вакуленко О. С. Оценка особенностей инновационного развития на региональном уровне // Экономика, предпринимательство и право. – 2024. – № 12. – c. 7177-7190. – doi: 10.18334/epp.14.12.122167.
2. Егоров Н.Е., Васильева Н.В. Оценка уровня инновационного развития регионов на основе эконометрической модели «Тройная спираль» и российского регионального инновационного индекса // Вопросы инновационной экономики. – 2022. – № 3. – c. 1697-1710. – doi: 10.18334/vinec.12.3.115181.
3. Митус А.А., Гармашова Е.П., Баранов А.Г., Дребот А.М. Методика оценки инновационного развития региона (на примере регионов Южного федерального округа) // Креативная экономика. – 2020. – № 12. -. – c. 3259-3276. – doi: 10.18334/ce.14.12.111416.
4. Печаткин В.В. Оценка уровня инновационного развития регионов России с позиций результативности реализации инновационной политики // Вопросы инновационной экономики. – 2024. – № 4. – c. 1191-1214. – doi: 10.18334/vinec.14.4.121690.
5. Шалаева Л. В. Современный подход к развитию методики рейтинговой оценки инновационной активности на примере федеральных округов Российской Федерации // Креативная экономика. – 2025. – № 5. – c. 1175-1190. – doi: 10.18334/ce.19.5.123042.
6. Борисов С.А., Соменкова Н.С. Повышение инновационного потенциала малого предпринимательства как инструмент экономической безопасности России // Экономическая безопасность. – 2022. – № 4. – c. 1665-1678. – doi: 10.18334/ecsec.5.4.114990.
7. Захарова Ю.В., Соменкова Н.С. Повышение конкурентоспособности малого инновационного бизнеса: российский и зарубежный опыт // Вестник Нижегородского университета им. Н.И. Лобачевского. – 2012. – № 2. – c. 114-117.
8. Яшин С. Н., Борисов С. А. Методологические подходы к определению рейтинга экономико-инновационного развития промышленных предприятий региона // Вопросы инновационной экономики. – 2020. – № 2. – c. 819-836. – doi: 10.18334/vinec.10.2.100921.
9. Лев М. Ю. Региональные тренды индикаторов экономической безопасности // Экономическая безопасность. – 2025. – № 6. – c. 1457-1482. – doi: 10.18334/ecsec.8.6.123453.
10. Лев М.Ю. Государственное управление ценовыми трендами в контексте прогноза социально-экономического развития: влияние на экономическую безопасность // Экономическая безопасность. – 2025. – № 10. – c. 2873-2898. – doi: 10.18334/ecsec.8.10.124108.
11. Индекс готовности правительств к использованию искусственного интеллекта в 2024 году. [Электронный ресурс]. URL: https://oxfordinsights.com/wp-content/uploads/2024/12/2024-Government-AI-Readiness-Index-2.pdf (дата обращения: 13.03.2026).
12. Глобальный инновационный индекс 2024. [Электронный ресурс]. URL: https://www.wipo.int/publications/ru/details.jsp?id=4758&plang=RU (дата обращения: 13.03.2026).
13. Россия в мировых рейтингах инновационного развития. [Электронный ресурс]. URL: https://www.vedomosti.ru/press_releases/2025/08/28/rossiya-v-mirovih-reitingah-innovatsionnogo-razvitiya (дата обращения: 13.03.2026).
14. Абашкин В. Л., Абдрахманова Г. И., Артёмов С. В., Куценко Е. С. Рейтинг инновационного развития субъектов Российской Федерации. Выпуск 9. / Нац. исслед. ун-т Высшая школа экономики. - М.: ИСИЭЗ ВШЭ, 2024. – 248 c.
15. Региональная шкала развития инноваций, 2024. [Электронный ресурс]. URL: https://i-regions.ru/reiting/regionalnyy-indeks-razvitiya-innovatsiy-i-index/I_Scale_2024.pdf?ysclid=mmmj5zjwy8522760569 (дата обращения: 13.03.2026).
16. Федеральная служба государственной статистики. [Электронный ресурс]. URL: http://www.gks.ru (дата обращения: 14.03.2026).

Страница обновлена: 27.07.2026 в 14:29:26

 

 

Assessment of regional innovative development in the context of economic security based on neural network modeling

Borisov S.A., Somenkova N.S.

Journal paper

Economic security
Volume 9, Number 7 (July 2026)

Citation:

Abstract:
Considering global trends associated with the acceleration of technological progress and the importance of innovations for ensuring the economic security of regions, enhancing the level of innovative development is one of the key goals of the country's development. The article presents the main methodologies used to assess the level of innovative development in Russian regions. The article analyzes factors influencing the level of regional innovation development and examines their statistical characteristics, such as mean values, mode, median, skewness, and kurtosis. Artificial intelligence was employed to cluster the regions of the Russian Federation according to their innovation performance indicators. In this study, Self-Organizing Kohonen Maps (SOM) were utilized as an AI tool. Regions were divided into four clusters; and their composition and characteristics reflecting the level of innovative development are presented. The research showed that six regions, including Moscow, Saint Petersburg, and Nizhny Novgorod Oblast, possess a high level of innovative development, making these regions leaders and benchmarks compared to those from other clusters. Based on the obtained distribution of regions across clusters, the authors developed proposals aimed at increasing the level of innovative development and reducing the innovation gap between leading and lagging regions. The results of this study can be used to refine regional strategies concerning innovative development, taking into account their cluster affiliation.

Keywords: regional innovative development, innovative index, artificial intelligence, self-organizing Kohonen maps, economic security

JEL-classification: O38, R11, O30, C63, H56

References:

Abashkin V. L., Abdrakhmanova G. I., Artyomov S. V., Kutsenko E. S. (2024). The rating of innovative development of the subjects of the Russian Federation. Issue 9

Borisov S.A., Somenkova N.S. (2022). Enhancing the innovation potential of small business as a tool for Russia´s economic security. Economic security. 5 (4). 1665-1678. doi: 10.18334/ecsec.5.4.114990.

Egorov N.E., Vasileva N.V. (2022). Assessing the level of regional innovative development based on the Triple Helix model and the Russian regional innovation index. Russian Journal of Innovation Economics. 12 (3). 1697-1710. doi: 10.18334/vinec.12.3.115181.

Grachev S. A., Vakulenko O. S. (2024). Assessment of innovative development specifics at the regional level. Journal of Economics, Entrepreneurship and Law. 14 (12). 7177-7190. doi: 10.18334/epp.14.12.122167.

Lev M. Yu. (2025). Regional trends in economic security indicators. Economic security. 8 (6). 1457-1482. doi: 10.18334/ecsec.8.6.123453.

Lev M.Yu. (2025). State management of price trends in the context of socio-economic development forecasting: impact on economic security. Economic security. 8 (10). 2873-2898. doi: 10.18334/ecsec.8.10.124108.

Mitus A.A., Garmashova E.P., Baranov A.G., Drebot A.M. (2020). Methodology for assessing the regional innovative development (on the example of the regions of the Southern federal district). Creative Economy. 14 (12. -). 3259-3276. doi: 10.18334/ce.14.12.111416.

Pechatkin V.V. (2024). Assessing the level of innovative development of Russian regions regarding the effectiveness of innovation policy. Russian Journal of Innovation Economics. 14 (4). 1191-1214. doi: 10.18334/vinec.14.4.121690.

Shalaeva L. V. (2025). A modern approach to developing a methodology for ranking innovation activity on the example of the federal districts of the Russian Federation. Creative Economy. 19 (5). 1175-1190. doi: 10.18334/ce.19.5.123042.

Yashin S. N., Borisov S. A. (2020). Methodological approaches to the determination of the rating of economic and innovative development of industrial enterprises in the region. Russian Journal of Innovation Economics. 10 (2). 819-836. doi: 10.18334/vinec.10.2.100921.

Zakharova Yu.V., Somenkova N.S. (2012). Improving the Competitiveness of Small Innovative Business: Russian and Foreign Experience. Vestnik of Lobachevsky University of Nizhni Novgorod. (2). 114-117.