Новости

Российские разработчики перенесли неструктурированные данные из ГИИС «Электронный бюджет» в S3 объектное хранилище

30.03.2023

Компания ОТР2000 реализовала для госведомства надежное масштабируемое хранение неструктурированных данных в импортозамещенном объектном S3 хранилище, где файлы находятся в безопасности от внешних угроз и всегда доступны. 

Накопление массива данных 

Государственная интегрированная информационная система «Электронный бюджет» Федерального казначейства РФ за период своего развития накопила очень много информации, для хранения которой использовалась только СУБД. Возникший избыток накопленных данных в функциональных подсистемах на серверах ведомства стал создавать существенные проблемы. Из-за большого количества вложений базы данных очень быстро набирали в объеме и возникали сложности с резервным копированием, отставанием standby от master и пр., что приводило к постепенному снижению производительности операционной базы данных. Одним из шагов по решению проблемы стал перенос неструктурированных объектов в отдельное облачное S3 хранилище. 

«Перенос хранения вложений в S3 объектные хранилища из реляционной СУБД позволил существенно, на 30–90%, сократить объемы реляционной базы. Снижение общей нагрузки на БД приводит к повышению общей производительности системы и, соответственно, уменьшению общего времени отклика для пользователей. Нам еще предстоит выполнить контрольные замеры по изменению нагрузки, но по опыту других проектов общий прирост производительности может быть существенный – до 20+%», — рассказал Александр АЗАРОЧКИН, главный архитектор Блока федеральных проектов и ведомственных решений ОТР 2000.

В качестве поставщика технологии по результатам аукциона ФК было выбрано решение отечественного провайдера, работа с которым осуществляется через стандартное и широко используемое API. Это обеспечивает надежное масштабируемое хранение и стабильную скорость раздачи любых объектов независимо от числа одновременных обращений.

Оптимизация данных на «новом месте»

На текущий момент из БД в единое S3-хранилище перенесено уже около 1 млрд объектов (сканы документов, электронные подписи и др.), при этом горизонтальное масштабирование и отказоустойчивость обеспечивается решением «из коробки». 

Как результат, снизилась нагрузка на реляционную базу в OLTP системах, уменьшилась нагрузка ввода/вывода (I/O), сократились затраты на служебные операции. Значительно повысились эксплуатационные характеристики баз данных за счет сокращения времени создания бэкапов, репликаций и выполнения других действий с операционной базой данных благодаря уменьшению ее объема.

Снизилась нагрузка на дисковую систему БД. Так, среднее время выполнения операции чтения данных дисков сократилось примерно в 2 раза: с 0,4 до 0,2 секунд.

 

Безопасность и простота миграции

Объектное S3-хранилище позволяет хранить постоянно растущий объем документов в соответствии с требованиями законодательства, в том числе в рамках обеспечения информационной безопасности. Было доработано программное обеспечение, чтобы переключить возможность использования объектов не из СУБД. Очевиден и экономический эффект — снижение стоимости эксплуатации: для хранения могут использоваться менее дорогостоящие носители и сервера по сравнению с реляционной БД. 

После перенесения всех объектов, высвобождается основная БД госведомства, что крайне необходимо для продолжения обеспечения реализации полномасштабной миграции системы на отечественный стек технологий в рамках исполнения Указа Президента РФ от 1 мая 2022г. № 250 «О дополнительных мерах по обеспечению информационной безопасности Российской Федерации».

Кроме того, если со стороны Гостех, в составе базисного ПО которого тоже есть PAAS S3 хранилище, будет требование по обмену данных с ведомством, то может быть обеспечен достаточно простой процесс миграции.

Выполненные работы и кому еще будет полезен перенос данных

В процессе переноса вложений в S3 хранилище сотрудниками ОТР выполнены следующие работы:

•   проведен сравнительный анализ преимуществ и недостатков хранения неструктурированных данных в БД OLTP и S3 совместимом объектном хранилище; 

•   проведена донастройка части подсистем ГИИС ЭБ для корректной работы с S3 хранилищем;

•   проведен сравнительный анализ с оценками по основным критериям возможных способов и ПО для реализации S3 совместимого объектного хранилища;

•   проведен расчет показателей назначения для S3 совместимого объектного хранилища;

•   разработана структура хранения неструктурированных данных в S3 хранилище;

•   разработана утилита по переносу вложений в S3 хранилище с последующей ее доработкой для возможности переноса ЭЦП.

Командой специалистов ОТР процесс оперативного внедрения в систему «Электронный бюджет» эффективного и гибкого масштабируемого облачного сервиса для хранения неструктурированных данных, резервного копирования и архивирования был реализован в запланированные в государственном контракте сроки и в целом позволило своевременно повысить общую производительность систем и эффективность рабочих процессов ведомства. 

Подобный перенос неструктурированных данных и/или информационных систем будет полезен крупным компаниям, гос. корпорациям, крупному ритейлу, промышленным организациям, любому бизнесу, которому крайне необходимо безопасно обрабатывать и хранить большие объемы неструктурированных данных и масштабироваться «на лету».

 

Новости

23/03/2023

Разработанное ОТР2000 решение для Социального фонда России упрощает получение социальных выплат для российских семей

УЗНАТЬ БОЛЬШЕ
15/02/2023

Вендорская среда в ГК ОТР: Т-КОМ презентовал линейку отечественных коммутаторов

УЗНАТЬ БОЛЬШЕ
10/02/2023

Константин Маркелов о XXIII Международном форуме iFin-2023

УЗНАТЬ БОЛЬШЕ
03/02/2023

Группа компаний ОТР в ТОП-20 крупнейших ИТ-поставщиков для российских банков

УЗНАТЬ БОЛЬШЕ
01/02/2023

Группа компаний ОТР выпустила обновление Универсальной фронт-офисной системы — УФОС

УЗНАТЬ БОЛЬШЕ
27/01/2023

Добрые дела: рождественские благотворительные акции от сотрудников ГК ОТР

УЗНАТЬ БОЛЬШЕ
23/01/2023

ГК ОТР в ТОП-10 крупнейших поставщиков ИТ-услуг в России

УЗНАТЬ БОЛЬШЕ
19/01/2023

ГК ОТР — N1 в рейтинге «Крупнейшие поставщики услуг заказной разработки ПО в России»

УЗНАТЬ БОЛЬШЕ
16/01/2023

ГК ОТР на Карте российского рынка информационной безопасности 2023

УЗНАТЬ БОЛЬШЕ
28/12/2022

Новогоднее поздравление от команды ГК ОТР

УЗНАТЬ БОЛЬШЕ
23/12/2022

ГК ОТР на заседании АРБ по вопросам аутсорсинга на финансовом рынке

УЗНАТЬ БОЛЬШЕ
20/12/2022

Группа компаний ОТР вошла в ТОП-60 крупнейших поставщиков ИТ для промышленных предприятий, заняв 21-е место

УЗНАТЬ БОЛЬШЕ
14/12/2022

Цифровая Россия: опыт ГК ОТР в цифровизации госуправления

УЗНАТЬ БОЛЬШЕ
09/12/2022

ГК ОТР входит в 15% ИТ-компаний, у которых сформирован ИТ-бренд

УЗНАТЬ БОЛЬШЕ
08/12/2022

ГК ОТР поздравляет сотрудников Федерального казначейства с 30-летием образования ведомства

УЗНАТЬ БОЛЬШЕ
05/12/2022

Оперативное импортозамещение: Арман Коспанов, Председатель Правления ГК ОТР на Tadviser Summit 2022

УЗНАТЬ БОЛЬШЕ
01/12/2022

ГК ОТР улучшает позиции в рейтинге крупнейших поставщиков ИТ-решений для госсектора по версии CNews, заняв 3-е место

УЗНАТЬ БОЛЬШЕ
28/11/2022

«Серебряная пуля» в арсенал банкам: Константин Маркелов на XX ежегодной встрече-конференции АРБ

УЗНАТЬ БОЛЬШЕ
21/11/2022

ОТР.Гуру: вебинары и дистанционное обучение теперь в одной экосистеме

УЗНАТЬ БОЛЬШЕ
17/11/2022

Пути развития ИТ-индустрии: ГК ОТР на IX международном форуме «ИТ-Диалог»

УЗНАТЬ БОЛЬШЕ
27/10/2022

Спикер ГК ОТР Константин Маркелов о трендах банковской автоматизации на IX международном форуме ВБА-2022

УЗНАТЬ БОЛЬШЕ
17/10/2022

Российский рынок информационной безопасности: какие средства защиты выбрать?

УЗНАТЬ БОЛЬШЕ
13/10/2022

Как улучшить бизнес-логику продуктов, процессов и технологий: состоялся митап ГК ОТР по Java разработке

УЗНАТЬ БОЛЬШЕ
12/10/2022

Группа компаний ОТР – в топ-50 крупнейших поставщиков решений в сфере информационной безопасности

УЗНАТЬ БОЛЬШЕ
06/10/2022

РЕД СОФТ в гостях у ОТР: встреча с российским поставщиком ИТ-решений на «Вендорской среде»

УЗНАТЬ БОЛЬШЕ
30/09/2022

Централизованные функции безопасности для противодействия кибератакам: интервью Алексея Строкова на Инфофоруме

УЗНАТЬ БОЛЬШЕ
23/09/2022

Группа компаний ОТР представила решения по цифровизации и благоустройству субъектов РФ на Kazan Digital Week

УЗНАТЬ БОЛЬШЕ
15/08/2022

T1 Cloud и разработчик ИТ-решений ОТР объявляют о начале сотрудничества

УЗНАТЬ БОЛЬШЕ
27/07/2022

Как low-code платформа «ОТР.Студия» помогает ИТ-интегратору автоматизировать процессы разработки

УЗНАТЬ БОЛЬШЕ
22/07/2022

Индексация выплат по мерам социальной поддержки россиян успешно выполнена цифровым сервисом ГК ОТР

УЗНАТЬ БОЛЬШЕ
21/07/2022

Группа компаний ОТР вошла в рейтинг «Крупнейшие поставщики решений для анализа данных»

УЗНАТЬ БОЛЬШЕ
20/07/2022

ГК ОТР презентовала ОТР. УСБ как централизованный подход повышения безопасности КИИ организации на Инфофоруме в Сочи

УЗНАТЬ БОЛЬШЕ
01/07/2022

Как минимизировать угрозу информационной безопасности предприятия и повысить эффективность управления ИБ?

УЗНАТЬ БОЛЬШЕ
30/06/2022

Сотрудники ГК ОТР прокачали soft skills и перезагрузились на антиконференции

УЗНАТЬ БОЛЬШЕ
20/06/2022

Группа компаний ОТР вошла в рейтинги СNews 100 и TAdviser 100: «Крупнейшие ИТ-компании в России»

УЗНАТЬ БОЛЬШЕ
16/06/2022

ГК ОТР включена в список карты рынка «Импортозамещение»

УЗНАТЬ БОЛЬШЕ
15/06/2022

ГК ОТР на Уральской ИТ-конференции «DUMP 2022»

УЗНАТЬ БОЛЬШЕ
07/06/2022

Выплаты российским семьям реализованы через цифровой сервис, разработанный ГК ОТР

УЗНАТЬ БОЛЬШЕ
06/06/2022

ГК ОТР приняла участие в ИТ-форуме металлургических предприятий России

УЗНАТЬ БОЛЬШЕ
01/06/2022

В российском ИТ стремительно увеличивается присутствие женщин

УЗНАТЬ БОЛЬШЕ
23/03/2023

Разработанное ОТР2000 решение для Социального фонда России упрощает получение социальных выплат для российских семей

УЗНАТЬ БОЛЬШЕ
Свяжитесь с нами, чтобы узнать больше
СВЯЗАТЬСЯ С НАМИ
Скопировано в буфер обмена