Банк “Санкт-Петербург” совместно с ИТ-партнером GlowByte реализовал проект по созданию отказоустойчивого решения для платформы управления данными на стеке Hadoop с помощью инструмента Data Ocean Flex Loader. Об этом сообщили представители GlowByte.

Flex Loader – инструмент в составе платформы Data Ocean российского разработчика DataBlend. Решение предназначено для автоматизации загрузки данных в такие популярные решения класса Big Data, как Hadoop, GreenPlum, объектное хранилище S3, а также для обеспечения межкластерной репликации в режиме, близкому к реальному времени.

Ян Гузов, CDO ПАО «Банк Санкт-Петербург»: «Платформа управления данными является источником для критичных отчетов Банка, в том числе регуляторных. Платформа отличается повышенными показателями отказоустойчивости и относится к классу business critical, что делает ее уникальной на российском рынке. Для систем такого класса требуется создание резервного контура, что само по себе является трудной задачей в окружении Hadoop “из коробки”».

Глеб Смирнов, владелец Платформы управления данными, заместитель CDO ПАО «Банк Санкт-Петербург»: «Для нас было важно иметь состояние резервного контура, близкого к реальному времени. Изучив все доступные инструменты на рынке и оценив возможность использования open-source-решений, мы остановили свой выбор на инструменте Data Ocean FlexLoader. В рамках проектной работы Flex Loader был интегрирован с нашими решениями по формированию аналитических расчетов и отчетности, он, по сути, является частью непрерывного регламентного процесса. Благодаря использованию Flex Loader мы не только достигли целевых показателей по отказоустойчивости, но и реализовали изоляцию изменений данных, которая недоступна в базовом дистрибутиве Hadoop».

Евгений Вилков, директор продукта, DataBlend: «Наша компания всегда рада предложить передовые продукты для платформ управления данными, в том числе Flex Loader – инструмент в составе семейства Data Ocean, предназначенный для автоматизации загрузки данных в целевые системы на базе СУБД GreenPlum, экосистему Hadoop и объектное хранилище S3. Ключевыми особенностями Data Ocean Flex Loader являются синхронизация метаданных и контроль качества загружаемых данных, работа в инкрементальном режиме, гибкое управление приоритезацией, многопоточностью и конкурентностью. Кроме того, инструмент позволяет реплицировать данные между двумя кластерами GreenPlum или Hadoop в Disaster Recovery режиме».

***
Банк «Санкт-Петербург» – один из крупнейших банков России. На 1 января 2024 года в Банке обслуживается 2 219 000 частных лиц и более 60 000 компаний в 65 офисах в Санкт-Петербурге, Ленинградской области, Москве, Калининграде и Новосибирске, включая представительства в Краснодаре и Ростове-на-Дону. Акции Банка торгуются с 2007 года, включены в высший котировальный список Московской биржи с кодом BSPB. Подробнее о Банке: www.bspb.ru.
Самую оперативную информацию о продуктах Банка, скидках и акциях, обзор лучших финансовых решений, а также рекомендации о наиболее эффективных способах управления своими сбережениями, можно узнать в специальном телеграм-канале Банка «Санкт-Петербург» – https://t.me/mybspb. Подписывайтесь и будьте в курсе последних финансовых новостей.

GlowByte – российская консалтинговая группа ИТ-компаний. Лидер BI-индустрии в РФ (топ рейтинга BI CNews с 2017 года) и СНГ. Крупнейший поставщик решений BI и Big Data, отечественных продуктов и профессиональных услуг в сферах финансовой аналитики и риск-менеджмента, DWH, CRM, Advanced Analytics, Machine Learning, RPA, IoT, BPM, AML и проч. Компания специализируется на проектах по импортозамещению.
GlowByte работает на рынке внедрения аналитических решений для бизнеса с 2004 года. Клиентами компании являются представители рейтинга ТОП-20 банков России (Сбер, Газпромбанк, ВТБ, Альфа-Банк, Тинькофф и многие другие), телеком-операторы, крупнейшие игроки сфер промышленности, страхования и ритейла (Норникель, Росгосстрах, X5 Retail Group, 36.6 и другие).

Data Sapience – резидент «Сколково» и российский поставщик собственного программного обеспечения, специализирующийся на разработке аналитических инструментов для среднего и крупного бизнеса.
Продукты компании включены в Реестр российского ПО и позволяют решать бизнес-задачи в области целевого маркетинга (доставка персонализированных коммуникаций), MLOps и управления жизненным циклом ML-моделей, управления рисками в сферах принятия решений (кредитный конвейер, предстраховые проверки и урегулирование убытков, скоринг контрагентов), противодействия отмыванию доходов (ПОД/ФТ) и мошенничеству (антифрод).
В портфеле компании – проекты в различных индустриях: финансовом секторе, телекоме, ритейле, e-commerce, производстве. В числе клиентов Data Sapience – Росбанк, Газпромбанк, Альфа-банк, Россельхозбанк, Ренессанс страхование, Мосбиржа, Узбекинвест, EVRAZ и др.