Технологии Big Data на финансовых рынках: практические аспекты

Болонин А.И.1, Алиев М.М.2, Исмаилов К.М.3
1 Финансовый университет при Правительстве Российской Федерации
2 Московский государственный институт международных отношений (Университет) Министерства иностранных дел Российской Федерации
3 Образовательное учреждение профсоюзов высшего образования «Академия труда и социальных отношений»

Статья в журнале

Экономическая безопасность (РИНЦ, ВАК)
опубликовать статью | оформить подписку

Том 7, Номер 5 (Май 2024)

Цитировать:
Болонин А.И., Алиев М.М., Исмаилов К.М. Технологии Big Data на финансовых рынках: практические аспекты // Экономическая безопасность. – 2024. – Том 7. – № 5. – С. 1093-1114. – doi: 10.18334/ecsec.7.5.121032.

Эта статья проиндексирована РИНЦ, см. https://elibrary.ru/item.asp?id=68531015

Аннотация:
В современном мире финансовые рынки становятся все более сложными и динамичными. Объемы данных, генерируемых в результате финансовых операций, растут экспоненциально, создавая как новые возможности, так и вызовы для участников рынка. В подобных условиях технологии больших данных становится незаменимым инструментом для повышения качества услуг, снижения издержек, повышения производительности и эффективности деятельности в целом. В данной статье анализу подвергается современный опыт применения технологий больших данных на российских и зарубежных финансовых рынках. Рассматривается эволюция внедрения больших данных в российский экономический сектор, риски и преимущества использования технологий, сопутствующее влияние. Исследование представляется актуальным, поскольку как сами технологии больших данных, так и финансовые рынки находятся в постоянном процессе развития и обновления. Сделан вывод о том, что с появлением новых секторов финансовых рынков необходимы иные способы обработки их данных. Одним из таких способов выступают технологии больших данных. Тем не менее, это требует их тщательного анализа и изучения в развивающейся финансовой сфере.

Ключевые слова: большие данные, финансовые рынки, технологии, информация (структурированная, неструктурированная)



Введение. Интенсивное распространение больших данных (Big Data), и возрастающая их технологическая сложность продолжают трансформировать способы работы и конкуренции на финансовых рынках [11; 12]. Big Data – это чрезвычайно большие наборы данных, которые можно проанализировать с помощью вычислений, чтобы выявить закономерности и тенденции, связанные с человеческим поведением и взаимодействиями в финансовой отрасли. Big Data характеризуются большим объемом, скоростью и разнообразием информации, которая подвергается обработке и анализу [18]:

– объем относится к огромным количествам неструктурированных данных низкой плотности. Объем может варьироваться от десятков терабайт до петабайт;

– уровень скорости зависит от требуемых параметров, поступающих данных и их обработки;

– разнообразие указывает на различные формы, которые могут принимать данные. Big Data отображаются в виде чисел, текста, изображений, аудио и видео.

Big Data включают:

– структурированные данные (например, базы данных);

– неструктурированные данные (например, сообщения в социальных сетях);

– полуструктурированные данные (например, веб-журналы).

Информация, полученная в результате анализа Big Data, может привести к более эффективному принятию решений и стратегическим шагам на финансовых рынках. Big Data открывают множество возможностей для финансового бизнеса, что обуславливает возможность совершенствовать процессы принятия решений, разрабатывать персонализированные продукты/услуги, обеспечивать идеальное обслуживание клиентов, делать точные прогнозы и выявлять мошеннические действия. В связи с чем, финансовые институты, такие как банки, хедж-фонды, инвестиционные компании, активно внедряют технологии Big Data в свои бизнес-процессы.

Цель исследования – изучить концептуальные подходы и практические аспекты технологий Big Data на финансовых рынках.

Задачи исследования:

– рассмотреть концептуальные подходы к Big Data;

– проанализировать практический (российский и зарубежный) опыт Big Data на финансовых рынках;

– определить перспективы использования Big Data на финансовых рынках, учитывая возможные риски.

Практическая значимость состоит в том, что полученные выводы и результаты исследования могут быть использованы для создания современной инфраструктуры в целях оптимизации существующих способов интеграции информационных данных в условиях цифровизации финансового рынка.

Концептуальные подходы к Big Data. Аналитика Big Data – это процесс извлечения актуальной информации из больших наборов информационных данных для поддержки принятия решений [25]. В финансах аналитику Big Data можно использовать для анализа тенденций финансовых рынков, поведения клиентов, обнаружения мошенничества, управления рисками и др [4].

Аналитика Big Data – это мощный набор методов, который обеспечивает более фундаментальное понимание огромного объема данных, генерируемых в финансовой отрасли. В аналитике Big Data используются передовые технологические методы, такие как машинное обучение, прогнозный анализ, интеллектуальный анализ данных и обработка естественного языка, для выявления закономерностей и взаимосвязей, которые сложно обрабатывать с помощью традиционных методов (рис. 1) [14].

Рисунок 1. Технологические решения для анализа Big Data на финансовых рынках

Источник составлено авторами.

Как видно из рисунка 1, технологические решения для анализа Big Data на финансовых рынках имеют широкий спектр применения.

В условиях стремительного роста объема данных в финансовой отрасли применение аналитики Big Data становится все более важным для принятия обоснованных решений, снижения рисков и повышения операционной эффективности [17]. Истоки аналитики Big Data в финансах можно проследить еще в начале 2000-х гг., когда компании начали использовать высокочастотные торговые алгоритмы для обработки огромных объемов данных в режиме реального времени. Со временем использование аналитики Big Data расширилось и включило в себя другие области, такие как управление рисками, скоринг клиентов, обнаружение мошенничества и соблюдение требований. В последние годы облачные решения, веб-сервисы и искусственный интеллект стали более распространенными в финансовой отрасли, что позволяет учреждениям обрабатывать большие объемы данных с большей скоростью.

Ключевыми преимуществами использования аналитики Big Data на финансовых рынках являются:

– улучшение процесса принятия решений. Big Data позволяют учреждениям/компаниям лучше прогнозировать свои финансовые показатели, анализируя тенденции производительности и предпочтения клиентов. Это дает им конкурентное преимущество перед другими компаниями, которые не имеют доступа к такого рода информации о своих клиентах или продуктах/услугах конкурентов;

– повышение операционной эффективности: анализ Big Data позволяет автоматизировать процессы и сократить ручной труд, обеспечивая повышение эффективности и производительности;

– рациональное управление рисками. Аналитика Big Data способствует выявлению рисков и активному их управлению;

– улучшение качества обслуживания клиентов. Аналитика Big Data способствует детализированному пониманию потребностей и предпочтений клиентов, что приводит к более персонализированным продуктам/услугам.

Управление данными – это процесс управления активами данных, который гарантирует, что данные доступны, когда они необходимы, и что они безопасны, достоверны и согласованы во всех бизнес-системах учреждения/компании [10]. При реализации программы управления данными следует соблюдать следующие принципы:

– управление данными: процесс обеспечения управления всеми данными в домене в соответствии с согласованными политиками и процедурами. Это включает в себя определение того, какую информацию необходимо собрать; определение того, как соответствующая информация будет использоваться; контроль прав доступа; мониторинг соблюдения правил и т. д.; ведение записей об изменениях, внесенных во время операций обработки, чтобы их можно было улучшить позже, если потребуется (например, контроль версий);

– управление основными данными: обеспечение единообразия всех основных записей в нескольких базах данных без дублирования/пробелов. Это достигается за счет централизованного контроля над определениями схемы/метаданными о каждом хранимом элементе (т.е., таблицах), связями между ними (т.е. внешними ключами) и т. д. [15].

Несмотря на многочисленные преимущества аналитики Big Data для финансовых учреждений/компаний, существуют и проблемы, с которыми они сталкиваются при ее внедрении. Некоторые из этих проблем включают в себя:

– качество и точность данных. Аналитика Big Data эффективна только тогда, когда данные точны и высокого качества;

– интеграция данных. Аналитика Big Data содержит обработку и анализ данных из различных источников, и их интеграция может быть сложной задачей;

– масштабируемость. Финансовые учреждения должны создать алгоритм масштабируемости своих решений для анализа Big Data по мере увеличения объемов данных;

– безопасность и конфиденциальность данных. Финансовые учреждения должны обеспечить соблюдение нормативных законов, касающихся конфиденциальности и безопасности данных.

Между тем, существует достаточно стратегий, которые финансовые учреждения могут использовать для решения перечисленных проблем [16]:

– установление политик и процедур управления данными может помочь обеспечить качество, точность и безопасность данных;

– хранение данных в центральном репозитории может помочь улучшить интеграцию, масштабируемость и управление данными;

– анонимизация данных может помочь финансовым учреждениям соблюдать нормативные законы, касающиеся конфиденциальности и безопасности данных;

– искусственный интеллект может помочь автоматизировать процессы и сократить ручной труд, что приведет к повышению эффективности и производительности.

По прогнозам, в 2024 г. по всему миру будет сгенерировано 147 зеттабайт данных. Это означает, что в этом году будет произведено 27 зеттабайт дополнительных данных по сравнению с предыдущим 2023 г. (рис. 2).

Рисунок 2. Динамика объёма Big Data

(созданных, собранных, скопированных и используемых по всему миру)

Примечание: значения на 2024 г. и 2025 г. – прогнозные.

Источник: составлено авторами по материалам [35].

Как видно из рисунка 2, значение показателя «данные в объёме» за период 2016-2023 гг. увеличилось на 102 зеттабайта с положительной тенденцией роста.

«Изменение по сравнению с предыдущим годом» за аналогичный исследуемый период составило 23,71%, что на 7,58% (в 2023 г.) больше, чем в 2016 г., с положительным прогнозом на 2025 г.

Ожидается, что в 2024 г. рынок аналитики Big Data достигнет 349,56 млрд. долл. США (рис. 3).

Рисунок 3. Размер мирового рынка аналитики Big Data, млрд. долл. США

Примечание: значения на 2024 г. и 2025 г. – прогнозные.

Источник: составлено авторами по материалам [35].

Как видно из рисунка 3, размер мирового рынка аналитики Big Data за анализируемый период увеличился на 155,84 млрд. долл. США с положительной тенденцией роста.

Основными причинами, способствующими быстрому росту рынка аналитики Big Data, являются экспоненциальный рост объема данных, растущий спрос на приложения облачных вычислений и цифровая трансформация во всех отраслях экономики.

Анализ практического (российского и зарубежного) опыта Big Data на финансовых рынках. Согласно исследованию Европейского банковского управления (EBA), банки Европейского Союза (ЕС) заинтересованы в использовании аналитики Big Data: растет доля как организаций, которые уже используют Big Data в своей деятельности, так и доля компаний, тестирующих, разрабатывающих и обсуждающих внедрение новых технологий [31]. Пандемия Covid-19, очевидно, способствовала ускорению внедрения технологии Big Data, а также машинного обучения (МО) и искусственного интеллекта (ИИ) для их обработки. Однако в периоды кризиса, инвестиции в инновационные технологии сокращаются, поскольку приоритет отдается удовлетворению краткосрочных потребностей, а не долгосрочных технологических проектов. Тем не менее, проведённое исследование Банком Англии (в 2020-2021 гг.) на предмет использования банками МО, ИИ и Big Data на фоне пандемии Covid-19 и инвестиций финансового сектора в Big Data по типам, предоставляемых финансовых услуг, показало иной результат (рис. 4; 5).

Рисунок 4. Использование аналитики Big Data среди банков ЕС, %

Источник: составлено авторами по материалам [26].

Как видно из рисунка 4, в использовании аналитики Big Data среди банков ЕС, за анализируемый период были отмечены следующие тенденции: «Используется или запущено» (+8%); «Пилотное тестирование» (-3%); «В разработке» (+1%); «Обсуждается» (+7%); «Вопрос не прорабатывается» (-1%).

Рисунок 5. Инвестиции финансового сектора ЕС в Big Data по типам,

предоставляемых финансовых услуг, %

Источник: составлено авторами по материалам [26].

Как видно из рисунка 5, инвестиции финансового сектора ЕС в Big Data по типам, предоставляемых финансовых услуг, за анализируемый период продемонстрировали положительный рост: «Персональный банкинг и банкинг для бизнеса» (+3%); «Страховые услуги» (+6%); «Управление активами» (+6%); «Кредитные карты и обработка платежей» (+5%); «Инвестиционный банкинг и рынки капитала» (+5%); «Кредитование и финансирование» (+4%).

Таким образом, пандемия Covid-19 простимулировала интерес к МО, ИИ и другим методам обработки значительных объемов данных в финансовом секторе ЕС.

Зарубежный опыт свидетельствует, что при работе с Big Data небольшие финансовые институты более склонны к использованию разработок сторонних поставщиков, тогда как крупные финансовые институты обладают достаточными ресурсами для разработки собственных решений [22]. Согласно результатам исследования Банка международных расчётов (BIS), многие европейские финансовые институты используют разработки сторонних поставщиков (например, инструменты для разработки моделей) [34]. При этом, ответственность за качество, используемых моделей и их результатов лежит на самих финансовых институтах.

Обратимся к опыту США, которые с уверенностью можно назвать лидером в использовании технологий Big Data. Например, в 2020 г. на Северную Америку приходилась наибольшая доля рынка инструментов Big Data [7]. Использование Big Data в финансовом секторе США насчитывает более двух десятилетий и продолжает активно развиваться. Внедрение Big Data в различные производственные отрасли крупными американскими и межнациональными компаниями оказало благотворное влияние на развитие этих компаний. В качестве примера можно привести опыт компании Nestle, которая за счет ИКТ-оптимизации и систематизации баз данных сократила операционные расходы на 1 млрд. долл. США [3].

В период 2010-2015 гг. наступил настоящий расцвет применения Big Data в финансовом секторе США. МО и предиктивная аналитика позволили создавать сложные модели, способные прогнозировать поведение клиентов, выявлять скрытые закономерности в данных, оптимизировать инвестиционные стратегии. Big Data стали рассматриваться как ключевой фактор конкурентного преимущества. Согласно отчету McKinsey, в этот период американская экономика получала дополнительно 300 млрд. долл. США в год за счет использования Big Data в финансовой индустрии [33].

С 2015 г. по настоящее время наблюдается эра ИИ и глубокого обучения в финансах. Передовые алгоритмы ИИ применяются для алгоритмической торговли на финансовых рынках, выявления сложных паттернов мошенничества, создания персонализированных финансовых ассистентов и чат-ботов. Big Data также помогают финансовым институтам соответствовать все более жестким требованиям регуляторов в области противодействия отмыванию денег (AML) и «знай своего клиента» (KYC). В то же время, регулирующие органы США уделяют повышенное внимание этичному использованию Big Data и защите конфиденциальности клиентов [32].

Сегодня Big Data играют центральную роль в цифровой трансформации финансового сектора США. Согласно опросу NewVantage Partners, 96% крупнейших финансовых институтов США инвестировали в Big Data и ИИ [28]. Эти технологии помогают улучшать клиентский опыт, повышать операционную эффективность, принимать более обоснованные стратегические решения. При этом, вопросы конфиденциальности, безопасности и этичного использования Big Data остаются критически важными, и требуют постоянного внимания со стороны финансовых организаций и регуляторов.

В Китае (2014 г.), во время отчета правительства на сессии Всекитайского собрания народных представителей впервые прозвучало словосочетание «Big Data» [30]. На следующий год (2015 г.) Госсоветом КНР был сформирован «План действий по продвижению развития Big Data». Исходя из национальных условий и текущих потребностей китайской экономики, на ближайшие 5-10 лет стало достижение следующих результатов в развитии и использовании Big Data:

– создание новой модели социального управления, ориентированной на высокоточное управление и многостороннюю координацию;

– создание стабильного, безопасного и эффективного механизма функционирования экономики;

– строительство новой системы обслуживания граждан, ориентированной на человека и приносящей пользу всему населению;

– создание новых драйверов и новой обстановки с целью развития массового предпринимательства и инноваций;

– формирование новой экосистемы для развития высокоинтеллектуальных и быстрорастущих отраслей.

В 2019 г. впервые в партийном документе – «Big Data» названы в числе факторов производства, подчеркнута роль рыночных механизмов в распределении производственных факторов [29].

В 2023 г. ЦК КПК и Госсовет КНР приняли решение о создании Государственного управления Big Data, передав ведомству ряд функций Канцелярии Комиссии ЦК КПК по сетевой безопасности и информатизации и Государственного комитета КНР по развитию и реформе.

Для Китая ситуация в области национальной безопасности и международной конкуренции становится более сложной, и это является ключевым стимулом для того, чтобы придать развитию Big Data и ИИ общегосударственный, системный и стратегический характер. Вопросы развития новых технологий неизменно находились в центре внимания Си Цзиньпина, который еще работая в начале 2000-х гг. губернатором провинции Фуцзянь запустил программу «Цифровая Фуцзянь». Фактически этот опыт, уже на более высоком уровне технологического развития и на новом витке глобальной конкуренции, был масштабирован на весь Китай [9].

В 2015 г. Правительство Российской Федерации (РФ) утвердило программу «Цифровая экономика Российской Федерации», которая предусматривала развитие технологий больших данных как одно из ключевых направлений [2]. Это послужило сигналом для бизнеса и привело к росту инвестиций в эту область.

В 2019 г. была принята национальная стратегия развития искусственного интеллекта до 2030 г., которая еще больше подчеркнула важность Big Data для развития российской экономики [1]. Стратегия предусматривала создание условий для широкого внедрения технологий ИИ и Big Data в различных отраслях, а также подготовку квалифицированных кадров в этой области.

За последние несколько лет в России были запущены крупные проекты в области Big Data. Например, в 2019 г. «Ростех» и «Ростелеком» объявили о создании совместного предприятия «Национальный центр информатизации», которое будет заниматься развитием технологий Big Data и ИИ [24]. В 2020 г. «Газпром нефть» запустила комплексную аналитическую платформу управления данными «Умное озеро данных» для анализа Big Data в нефтегазовой отрасли [8].

Пандемия Covid-19 также, как и в других странах ускорила внедрение Big Data в России. Многие компании были вынуждены перейти на удаленную работу и цифровые каналы продаж, что привело к росту объемов данных и необходимости их эффективной обработки [20].

Несмотря на то, что Россия начала внедрение Big Data позже некоторых развитых стран, в последние годы наблюдается значительный прогресс в этой области. Благодаря государственной поддержке, росту инвестиций и запуску крупных проектов, Big Data становятся все более важной частью российской экономики. Рассмотрим некоторые аспекты и направления развития Big Data в российской экономике:

– государственная поддержка. Правительство РФ активно поддерживает развитие технологий Big Data, что подтверждается Национальной стратегией развития искусственного интеллекта до 2030 г., в которой большое внимание уделяется внедрению Big Data в различных отраслях экономики;

– рост инвестиций. Российские компании увеличивают инвестиции в технологии Big Data. Согласно исследованию Центра стратегических разработок (ЦСР), объем рынка Big Data и их обработки в России к 2025 г. вырастет до 127 млрд. руб. [27];

– применение в различных отраслях. Big Data находят применение в различных секторах российской экономики, таких как банковский сектор, ритейл, телекоммуникации, энергетика и др. К примеру, Сбербанк использует Big Data для персонализации услуг, снижения ставок по кредитам [6];

– развитие инфраструктуры. В России активно развивается инфраструктура для работы с Big Data, включая центры обработки данных, облачные сервисы и высокоскоростные сети передачи данных. Например, «Ростелеком» инвестирует в строительство дата-центров для предоставления услуг хранения и обработки Big Data [23];

– подготовка кадров. Российские университеты и образовательные платформы предлагают программы обучения в области Big Data и анализа данных. Например, МФТИ и Яндекс совместно запустили магистерскую программу «Инфраструктура больших данных» на базе кафедры «Анализ данных» [19].

Между тем, внедрение Big Data в российской экономике сталкивается с рядом проблем, таких как нехватка квалифицированных кадров, необходимость модернизации ИТ-инфраструктуры и обеспечение безопасности данных. Что касается современного состояния Big Data в финансовой сфере, технологии активно внедряются для решения различных задач, таких как анализ клиентского поведения, управление рисками, противодействие мошенничеству и повышение эффективности бизнес-процессов. В первую очередь, Big Data активно используются в банковском секторе. Крупные российские банки, такие как Сбербанк, ВТБ, Альфа-Банк и другие, массово инвестируют в развитие Big Data. Они используют Big Data для сегментации клиентов, персонализации предложений, оценки кредитных рисков и выявления мошеннических операций. Кроме того, Big Data используется для анализа финансовых рынков, прогнозирования трендов, оценки инвестиционных возможностей и управления портфелями активов.

Перспективы использования Big Data на финансовых рынках. В эпоху Big Data индустрия финансовых услуг становится все более конкурентоспособной. Персонализация обслуживания клиентов с помощью роботизированных консультаций, улучшение кибербезопасности для предотвращения утечки данных и анализ не только кредитных рейтингов, но и социальных показателей – все это часть продолжающихся трансформаций на финансовых рынках.

Между тем, при использовании Big Data в управлении рисками и оптимизации операционной деятельности возникают методологические риски, в том числе риски, связанные с качеством данных. Методологии анализа Big Data пока находятся в процессе развития. До сих пор не ясно, каким образом выбрать данные, их обработать и агрегировать. Также есть вопросы относительно аналитических инструментов, которые требуются для того, чтобы интегрировать результаты анализа Big Data с информацией, получаемой из традиционных источников.

Еще одной смежной проблемой является модельный риск при построении моделей на основе Big Data – использование ошибочных исходных данных или допущений, применение модели для целей иных, чем предполагалось при ее разработке, а также ошибки при разработке самой модели. Сложность вызывает то, что зачастую ИИ работает по принципу черного ящика: данные закладываются в модель, ИИ проводит анализ и выдает результат, который невозможно перепроверить и интерпретировать. В этой связи, важен вопрос квалификации сотрудников, работающих с Big Data.

При использовании Big Data для клиентов финансовых учреждений возникают риски, связанные с защитой персональных данных. Big Data подразумевают сбор различной информации о клиентах. С одной стороны, это помогает повысить качество финансовых услуг за счет кастомизации. С другой стороны, увеличиваются риски ненадлежащего использования персональных данных и необходимость их защиты. Любое потенциальное ненадлежащее использование Big Data и недостаточная информационная безопасность могут подорвать доверие потребителей в долгосрочной перспективе.

Одним из следствий недостатка транспарентности и интерпретируемости методов обработки Big Data с использованием ИИ являются возможные проявления дискриминации (неценовой) по расовому, национальному, религиозному, гендерному и прочим признакам. В силу недостаточной транспарентности указанных методов (в отличие от традиционных статистических моделей), дискриминация может быть неумышленной со стороны финансовой организации.

Вопрос о влиянии использования Big Data на конкуренцию является спорным. С одной стороны, использование Big Data крупными финансовыми институтами, изначально располагающими значительным объемом информации о своих клиентах и достаточными ресурсами для внедрения новых технологий, дает таким компаниям конкурентное преимущество перед более мелкими игроками рынка. Большие базы данных позволяют наилучшим образом использовать элементы МО и ИИ для скоринговой оценки заемщика, оценки риска страхователя или для предложения кастомизированной финансовой услуги, в то время как отсутствие больших объемов данных часто делает использование этих технологий неэффективным. С другой стороны, использование Big Data может стимулировать конкуренцию за счет выхода на рынок финансовых услуг финтех- и bigtech-компаний, использующих технологии обработки Big Data, что в целом создает конкуренцию традиционным финансовым институтам.

Серьезными рисками для финансовой стабильности являются риски сторонних поставщиков Big Data, услуг по их обработке и возникновение в связи с этим новых системных рисков. Поскольку не все финансовые организации обладают ресурсами и компетенциями для работы с Big Data силами внутренних подразделений, привлечение к этой деятельности новых, сторонних игроков приводит к усложнению взаимоотношений на финансовых рынках. Финансовые учреждения могут быть не в состоянии полностью оценить и управлять этими рисками, поскольку эти риски выходят за рамки их организационной структуры. Масштаб новых взаимосвязей может увеличить сложность финансовой системы и создать новые каналы распространения системных рисков.

Кроме того, вызывают опасения риски, связанные с «серыми» зонами в регулировании. Особую опасность данная ситуация будет представлять в случае, если компании, выходящие за пределы регуляторного периметра, станут системно значимыми игроками на рынке.

Еще одним вызовом является повышение ряда рисков для финансовых институтов, запаздывающих с внедрением технологий Big Data. Ряд финансовых институтов успешно используют Big Data для мониторинга и предотвращения реализации операционных рисков, в том числе киберрисков, и рисков нарушения ПОД/ФТ. Ожидается, что в будущем все больше финансовых институтов будут внедрять данные технологии. Однако существует риск того, что мошенники обратят внимание на финансовые институты, которые отстают во внедрении данных технологий.

При наличии перечисленных рисков, авторы предлагают следующие меры по их минимизации:

– в финансовой организации должна быть разработана стратегия управления данными, которая бы регламентировала вопросы управления Big Data, в том числе порядок их сбора и хранения, обеспечения полноты и качества данных, состав ответственных лиц (подразделений), ответственность руководства организации, порядок осуществления проверок со стороны внутреннего аудита;

– с целью ограничения модельных рисков и рисков качества Big Data в финансовой организации должна быть разработана система обеспечения полноты и качества данных, так, чтобы не могло возникнуть ситуации, когда модели, разработанные на основе Big Data, дают смещенные, некорректные результаты или результаты, ведущие к дискриминации. Модели должны проходить регулярную калибровку и независимую валидацию;

– с целью ограничения рисков, связанных с этичным использованием Big Data, должны быть разработаны специальные принципы, которые могут быть закреплены на уровне стандарта системы управления рисками;

– с целью управления риском зависимости от сторонних поставщиков Big Data или услуг по их обработке, во внутренних документах финансовой организации должны быть предусмотрены соответствующие подходы, в частности, по мониторингу доли каждого отдельного поставщика Big Data, стресс-тестированию операционного риска в случае сбоев в работе поставщиков, порядку восстановления деятельности в случае сбоев.

Не смотря на существующие риски, технологии Big Data имеют широкий спектр перспектив, и открывают новые возможности за счет использования большого объёма финансовых данных и передовой аналитики. В целом, Big Data сегодня играют ключевую роль в финансах. Перечислим основные тенденции, которые очевидно будут опираться на Big Data в будущем.

ИИ быстро становится отраслевым стандартом и меняет способ взаимодействия клиентов с поставщиками финансовых услуг. Согласно исследованию Accenture, 75% банков считают, что в ближайшем будущем ИИ станет краеугольным камнем взаимодействия с клиентами [5]. ИИ уже изменил многие отрасли, включая транспорт с помощью беспилотных автомобилей, обработку естественного языка, автономную мобильность, межмашинное общение и др. Все это было бы невозможно без масштабных объёмов данных, используемых для процессов обучения.

Узкоспециализированная аналитика. В настоящее время использование аналитики в финансах все еще достаточно широко распространено. Однако следующее поколение аналитики предложит передовые идеи для области, ориентированной на конкретные отрасли. Это положит начало развитию высоко персонализированного и многоканального банковского обслуживания. Такие возможности будут включать данные ГИС, бизнес-данные, движение, процессы и многое другое. Финансовая аналитика будет развиваться настолько, что сможет предоставлять отраслевую информацию и продукты для электронной коммерции, производства, управления процессами и обучения.

Прогнозная аналитика и автоматизация. «Концепция прогнозной аналитики относительно молода, но по мере ее развития специализированная аналитика станет нормой и достаточно надежной, чтобы делать точные прогнозы на основе анализа Big Data» [21]. На этом этапе большая часть аналитических процессов будет автоматизирована с использованием МО и сложного ИИ. Конкуренция в сфере финансов вскоре будет зависеть от того, насколько готова компания освоить такие передовые инструменты и использовать их для обслуживания своих клиентов.

Новая карьера в сфере финансов. Новые технологии требуют новых знаний и требований отрасли. Вполне вероятно, что в ближайшем будущем появятся новые профессии в области прогнозной и продуктовой аналитики, где эксперты смогут использовать Big Data для прогнозирования будущего и давать рекомендации по продуктам. Очевидно, что специалисты по обработке данных будут специализироваться в таких областях, как бизнес-эксперты, потребительские технологии, производство и т. д.

Сегментация клиентов. Финансовые учреждения обслуживают клиентов с различными требованиями и поведением. Сегментация клиентов превратит банк из учреждения общего назначения в учреждение, которое систематизирует своих клиентов в группы и ориентируется на них как таковых. В будущем динамическая сегментация клиентов будет развиваться еще дальше, и включать индивидуальные продукты, поддерживаемые ИИ.

Заключение

Big Data полностью изменили финансовую отрасль. Сложные аналитические методы и алгоритмы МО помогают компаниям выявлять скрытые тенденции и закономерности, которые способствуют быстрому и точному принятию решений. Банки и другие финансовые учреждения используют Big Data для улучшения своей операционной деятельности, принятия более эффективных решений и предоставления более персонализированных услуг своим клиентам.

По мере развития технологий Big Data, на финансовых рынках могут создаваться инновационные продукты и услуги, которые будут удовлетворять растущие потребности потребителей и инвесторов. Однако компаниям необходимо осторожно сотрудничать с поставщиками решений для Big Data, чтобы воспользоваться всеми его преимуществами.

Между тем, внедрение технологий Big Data в финансовом секторе сопряжено с рядом проблем, таких как необходимость обеспечения безопасности и конфиденциальности данных, высокие затраты на инфраструктуру и нехватка квалифицированных специалистов. Для успешного применения Big Data требуется комплексный подход и тщательное планирование. Для реализации потенциала Big Data необходимы совместные усилия регуляторов, финансовых организаций и технологических компаний.

Чтобы реализовать весь потенциал Big Data, необходимо решить текущие проблемы. В мире Big Data следует учитывать политику, касающуюся конфиденциальности, безопасности, интеллектуальной собственности и ответственности [13]. Финансовые организации должны не только привлекать специалистов и внедрять технологии, но, и также структурировать рабочие процессы и создавать стимулы для оптимизации использования Big Data.


Источники:

1. Указ Президента РФ от 10.10.2019 № 490 «О развитии искусственного интеллекта в Российской Федерации». Президент России. [Электронный ресурс]. URL: http://www.kremlin.ru/acts/bank/44731 (дата обращения: 30.04.2024).
2. Распоряжение Правительства РФ от 28.07.2017 № 1632-р об утверждении программы «Цифровая экономика Российской Федерации». Правительство России. [Электронный ресурс]. URL: http://government.ru/docs/28653 (дата обращения: 30.04.2024).
3. Авдеева И. Анализ зарубежного опыта использования глобальных технологий «BigData» // Вестник евразийской науки. – 2016. – № 6. – c. 13.
4. Болонин А.И., Болонина С.Е., Лещенко Ю.Г. Мониторинг финансовых инноваций в статистике центральных банков // Информатизация в цифровой экономике. – 2023. – № 2. – c. 119-138. – doi: 10.18334/ide.4.2.118424.
5. Болонин А.И., Вецин А.Ю., Мануйлов К.Е. Основы регулирования финансовых рынков. / Учебное пособие. - Москва: ООО «Русайнс», 2023. – 484 c.
6. Большие данные (Big Data) в Сбербанке // Tadviser. Режим доступа https://www.tadviser.ru/index.php/%D0%A1%D1%82%D0%B0%D1%82%D1%8C%D1%8F:%D0%91%D0%BE%D0%BB%D1%8C%D1%88%D0%B8%D0%B5_%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D0%B5_(Big_Data)_%D0%B2_%D0%A1%D0%B1%D0%B5%D1%80%D0%B1%D0%B0%D0%BD%D0%BA%D0%B5 (дата обращения 30.04.2024)
7. Большие данные (Big Data) мировой рынок // Tadviser. Режим доступа: https://www.tadviser.ru/index.php/%D0%A1%D1%82%D0%B0%D1%82%D1%8C%D1%8F:%D0%91%D0%BE%D0%BB%D1%8C%D1%88%D0%B8%D0%B5_%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D0%B5_(Big_Data)_%D0%BC%D0%B8%D1%80%D0%BE%D0%B2%D0%BE%D0%B9_%D1%80%D1%8B%D0%BD%D0%BE%D0%BA#cite_note-2 (дата обращения 30.04.2024)
8. «Газпром нефть» создала платформу управления данными. Comnews. [Электронный ресурс]. URL: https://www.comnews.ru/content/204544/2020-02-12/2020-w07/gazprom-neft-sozdala-platformu-upravleniya-dannymi (дата обращения: 30.04.2024).
9. Денисов И.Е. Китайская стратегия «больших данных»: реформа управления, инновации и глобальная конкуренция. - М.: Издательство «МГИМО-Университет», 2023. – 28 c.
10. Егоров А.А. Программные платформы для работы с большими данными (BigData). Сравнительный анализ. Часть 1 // Автоматизация и IT в энергетике. – 2021. – № 10. – c. 12-28.
11. Караваева И.В., Лев М.Ю. Экономическая безопасность: технологический суверенитет в системе экономической безопасности в современной России // Экономическая безопасность. – 2023. – № 3. – c. 905-924. – doi: 10.18334/ecsec.6.3.118475.
12. Ларионова И.В. Как сохранить доверие населения к участникам финансового рынка // Сберегательное дело за рубежом. – 2020. – № 2. – c. 3-10. – doi: 10.36992/75692_2020_2_3..
13. Лев М.Ю. Цифровизация социально-экономической сферы в аспекте экономической безопасности стран СНГ // Развитие и безопасность. – 2022. – № 2. – c. 88-102. – doi: 10.46960/2713-2633_2022_2_88.
14. Лев М.Ю., Болонин А.И., Туруев И.Б., Лещенко Ю.Г. Концепция искусственного интеллекта в деятельности центральных банков: институциональные возможности // Экономическая безопасность. – 2024. – № 4. – c. 781-808. – doi: 10.18334/ecsec.7.4.120831.
15. Лещенко Ю.Г. Квантовая верификация финансовой системы в целях безопасности // Экономическая безопасность. – 2024. – № 3. – c. 535-558. – doi: 10.18334/ecsec.7.3.120696.
16. Маркова О.М. Трансформация деятельности банков в парадигме экосистем: риски и возможности финансовых технологий // Банковские услуги. – 2023. – № 6. – c. 21-28. – doi: 10.36992/2075-1915_2023_6_21.
17. Морозова О.А. Киберугрозы цифровых платформ: основные риски, факты и тренды // Сберегательное дело за рубежом. – 2021. – № 2. – c. 29-38. – doi: 10.36992/75692_2021_2_29.
18. Морозова О.А. Сервис управления качеством данных как обязательный компонент цифровой платформы современного банка // Банковские услуги. – 2021. – № 10. – c. 31-36. – doi: 10.36992/2075-1915_2021_10_31.
19. МФТИ Магистратура. Мфти. [Электронный ресурс]. URL: https://old.mipt.ru/education/chairs/da/education/masters/ (дата обращения: 30.04.2024).
20. Пандемия ускорила внедрение Big Data в России. Cnews.ru. [Электронный ресурс]. URL: https://www.cnews.ru/articles/2021-02-20_pandemiya_uskorila_vnedrenie (дата обращения: 30.04.2024).
21. Панова Г. С. Адаптационный потенциал банков в глобальной экономике // Банковские услуги. – 1915. – № 9. – c. 2-13. – doi: 10.36992/2075-1915_2023_09_2.
22. Радковская Н.П., Раткевич А.О., Фролов К.Д. Новая парадигма банковского дела в условиях технологического суверенитета // Банковские услуги. – 2023. – № 5. – c. 19-24. – doi: 10.36992/2075-1915_2023_5_19.
23. «Ростелеком» и «Росэнергоатом» инвестируют 16 млрд руб. в ЦОД. Comnews.ru/. [Электронный ресурс]. URL: https://www.comnews.ru/content/107377/2017-06-21/rostelekom-stroit-samyy-bolshoy-cod-v-strane (дата обращения: 30.04.2024).
24. «Ростех» и «Ростелеком» создадут компанию для развития искусственного интеллекта и больших данных. Коммерсант. [Электронный ресурс]. URL: https://www.kommersant.ru/doc/4171267 (дата обращения: 30.04.2024)).
25. Шахурин А.В. Технологии и методы анализа Big Data в логистических системах // Via scientiarum - Дорога знаний. – 2023. – № 3. – c. 142-148.
26. Bank of England. The impact of machine learning and big data on credit markets. Bankofengland.co.uk. [Электронный ресурс]. URL: https://www.bankofengland.co.uk/working-paper/2021/the-impact-of-machine-learning-and-big-data-on-credit-markets (дата обращения: 29.04.2024).
27. Big Data по-русски пошла в рост. Независимая газета. [Электронный ресурс]. URL: https://www.ng.ru/economics/2023-09-25/1_8835_bigdata.html (дата обращения: 30.04.2024).
28. Big Data and AI Executive Survey 2021. NewVantage Partners. [Электронный ресурс]. URL: https://www.newvantage.com/thoughtleadership (дата обращения: 30.04.2024).
29. Chinadaily. Full text of resolution on 19-th CPC Central Committee report. Chinadailyhk.com. [Электронный ресурс]. URL: https://www.chinadailyhk.com/hk/article/296210 (дата обращения: 30.04.2024).
30. China’s 2014 Government Work Report: Taking Stock of Reforms. Uscc.gov. [Электронный ресурс]. URL: https://www.uscc.gov/sites/default/files/Research/USCC%20Backgrounder_NPC%20scorecard.pdf (дата обращения: 30.04.2024).
31. EBA report identifies key challenges in the roll out of Big Data and Advanced Analytics. Eba. [Электронный ресурс]. URL: https://www.eba.europa.eu/publications-and-media/press-releases/eba-report-identifies-key-challenges-roll-out-big-data-and (дата обращения: 29.04.2024).
32. Jagtiani J., Lemieux C. The roles of alternative data and machine learning in fintech lending: evidence from the LendingClub consumer platform // Financial Management. – 2018. – № 4. – p. 1009-1029.
33. McKinsey Global Institute. Big data: The next frontier for innovation, competition, and productivity. Mckinsey.com. [Электронный ресурс]. URL: https://www.mckinsey.com.br/~/media/mckinsey/business%20functions/mckinsey%20digital/our%20insights/big%20data%20the%20next%20frontier%20for%20innovation/mgi_big_data_full_report.pdf (дата обращения: 30.04.2024).
34. Mona Amer, Hiren Jani and Mathieu Le Cam The data analytics lab – from innovation to products // IFC-Bank of Italy Workshop on «Data Science in Central Banking. 2022.
35. Volume of data/information created, captured, copied, and consumed worldwide from 2010 to 2020, with forecasts from 2021 to 2025. Statista. [Электронный ресурс]. URL: https://www.statista.com/statistics/871513/worldwide-data-created/ (дата обращения: 28.04.2024).

Страница обновлена: 06.08.2024 в 00:09:16