Logo

Аналитическое хранилище данных

Основное отличие нашего стандартного решения, это хранение первичных, а не агрегированных данных, аналогичных объектам САБ SrBank, с автоматическим режимом репликации данных в  режиме реального времени, в оптимизированной для быстрого чтения данных структуре.

Данный продукт, позволяет значительно снизить нагрузку на продуктовый OLTP сервер, за счет переноса построения аналитических запросов/отчетов на другой OLAP сервер, с другими режимами оптимизации и фактически с другой архитектурой решения.

Основной целью использования OLAP является анализ данных и представление результатов этого анализа в виде, удобном для восприятия и принятия решений. Основная идея OLAP заключается в построении аналитических витрин данных, в т.ч. в виде многомерных кубов, с различными механизмами, например Drill Down, которые будут удобны для работы, как бизнес-аналитиков, так и непосредственно представителей бизнеса. Наше решение, в первую очередь обеспечивает передачу, полноту и  целостность данных в схеме DWH.

К данному хранилищу данных имеется возможность подключать любой перечень разнородных систем, используя, либо наши ETL инструменты, либо стандартные инструменты Oracle, либо других производителей.

Один из примеров эффективного использования аналитического хранилища, является внедрение в ФГВФЛ, где на базе данного решения было построено аналитическое хранилище, для  консолидации первичных данных, порядка 90 банков с 9 разновидностями АБС  и 4 различными БД.

Данное решение реализует основные требования предъявляемые к OLAP системам:

  • Поддержка высокой скорости получения данных из хранилища
  • Простота настройки витрин данных
  • Поддержка внутренней непротиворечивости данных
  • Возможность получения срезов данных (slice and dice)
  • Полнота и достоверность хранимых данных
  • Наличие удобных инструментов для просмотра данных в хранилище
  • Поддержка режима реального времени в процессе обновления данных

Хранилище данных имеет встроенный конструктор, как в Desctop, так и WEB реализации, для визуализации витрин данных, встроенный генератор отчетов, а так же целый набор технологических инструментов, для полноценной работы.

Возможно использование современных BI инструментов различных производителей, в первую очередь за счет большого количества удобных встроенных функций по и манипуляции и отображению данных, в т.ч. на Mobile устройствах.

К функциональным и технологическим особенностям хранилища данных можно отнести следующее:

  • Наличие механизма загрузки/выгрузки данных:  по расписанию, по событию, вручную. Полная загрузка и перезагрузка данных за любой день
  • Наличие режима постоянной выгрузки информации за активный день
  • Поддержка непрерывной и работы хранилища  и основной системы в режиме 24/7 без технологических остановок
  • Наличие механизма контроля реплицируемых данных, на только с точки зрения целостности, но и с возможностью настройки различных механизмов сверки финансовых данных
  • Наличие механизма автоматической сверки дневных остатков и оборотов по событию закрытия операционного дня в АБС
  • Наличие механизма автоматической синхронизации данных АБС с хранилищем по факту изменения данных в АБС за любой период (отслеживание изменений производится по основным событиям (Insert, Update, Delete) в АБС
  • Наличие системы полномочий для настройки доступа пользователей к данным хранилища на уровне задач и отчетов
  • Ведение протоколов всех загружаемых файлов и всех возможных ошибок при приеме данных
  • Консолидация и хранение протоколов и самих файлов по XML отчетности НБУ

На базе аналитического хранилища данных наша компания  выполняет построение пакетов аналитических отчетов по индивидуальному заказу.