Цель
К настоящему времени во многих организациях накоплены колоссальные объемы данных, на основе которых можно решать самые разнообразные аналитические и управленческие задачи в любой сфере деятельности. Проблемы хранения и обработки аналитической информации становятся все более актуальными и привлекают внимание специалистов и фирм, работающих в области информационных технологий.
В идеале работа аналитиков и руководителей различных уровней должна быть организована так, чтобы они могли:
- иметь доступ ко всей интересующей их информации
- пользоваться удобными и простыми средствами представления и работы с этой информацией
Именно на достижение этих целей и направлены информационные технологии, объединяющиеся под общим названием хранилища данных и бизнес-анализа.
Наша задача: создать решение, обеспечивающее руководителей и аналитиков достоверной информацией, необходимой для оперативного анализа и принятия решений.
Для решения этих проблем мы предлагаем новый подход к созданию аналитических систем – единую и функционально полную платформу для решения всех перечисленных задач. Основой решения является система управления базами данных Oracle Database, с помощью которой можно не только надежно хранить огромные объемы аналитической информации, но и эффективно выполнять процедуры извлечения данных из разнородных источников, согласовывать, агрегировать и преобразовывать эти данные в аналитическую информацию, загружать ее в хранилище. Кроме того, средствами этого же продукта поддерживаются различные методы анализа данных, включающие многомерный анализ, прогнозирование, автоматический поиск закономерностей.
Компания «КОРУС Консалтинг СНГ» является одной из ведущих компаний в области создания аналитических систем и хранилищ данных. Практика BI и DWH в компании развивается уже более 5 лет. За это время были созданы и внедрены проекты для различных видов деятельности, начиная с ритейла и телекома и заканчивая логистикой и радиослужбой РФ.
Используемые технологии и продукты
Основная идея заключается в создании трех выделенных слоев:
- Хранение данных
- Извлечение, преобразование и загрузка данных
- Анализ данных (рабочие места пользователей)
Хранение данных
Этот слой является единым, высокопроизводительным корпоративным хранилищем данных, предназначенным для хранения значимой, проверенной, согласованной, непротиворечивой и хронологически целостной информации, которую с достаточно высокой степенью уверенности можно считать достоверной.
В качестве среды хранения информации в реляционных хранилищах и витринах данных используются следующие продукты:
| Продукт | Описание |
| Oracle Database | СУБД для хранилища данных и реляционных витрин данных |
| Oracle OLAP Option | Опция СУБД для многомерных витрин данных |
| Essbase | Универсальный OLAP-сервер для сбора, обработки и представления информации в различных аналитических разрезах и построения аналитических витрин |
Извлечение, преобразование и загрузка данных
В качестве источников информации для хранилища могут выступать разнородные источники данных (СУБД, плоские файлы, XML-файлы, веб-сервисы и др.)
Загрузка данных из источников в хранилище осуществляется специальными процедурами, позволяющими:
- извлекать данные
- выполнять различные типы согласования и очистки данных
- преобразовывать данные при перемещении их от источников к хранилищу
- загружать согласованные и «очищенные» данные в структуры хранилища
Для разработки, поддержки и выполнения таких процедур рекомендуется использовать специализированный инструментарий, предназначенный для автоматизации процессов извлечения данных их источников, их преобразования и загрузки в целевое хранилище. Такой инструментарий должен обеспечивать автоматическое формирование процедур загрузки на основе декларативной информации об источниках, правилах согласования и преобразования.
В наших проектах мы используем следующие продукты:
| Продукт | Описание |
| Oracle Warehouse Builder | Поддержка процессов извлечения, преобразования и загрузки данных в хранилище |
| Oracle Data Integrator | Поддержка процессов извлечения, преобразования и загрузки данных в хранилище |
Анализ данных
Для организации доступа аналитиков к данным хранилища и витрин используются специализированные рабочие места, поддерживающие необходимые технологии как оперативного, так и долговременного анализа. Результаты работы аналитиков оформляются в виде отчетов, графиков, рекомендаций и сохраняются как на локальном компьютере, так и в общедоступном узле локальной сети.
| Продукт | Описание |
| Oracle Business Intelligence | Аналитический портал Регламентированная отчетность Произвольные запросы Интерактивные информационные панели Уведомления в реальном времени Интеграция с MS Office Анализ данных в автономном (off-line) режиме Сервер бизнес-анализа |
Наш опыт
- ЗАО «АВ-Инвест» — владелец сети розничных супермаркетов «Азбука Вкуса».
Создание информационно-аналитической системы для анализа деятельности сети. - ООО «Скартел» — первая российская компания, запустившая в эксплуатацию сети высокоскоростной передачи данных на базе технологии Mobile WiMAX. Создание корпоративного хранилища данных.
- ООО «МОРЕ» медийная компания — агрегатор медиаконтента входит в холдинг WiMAX Holding Ltd.
Создание хранилища данных и системы аналитической отчетности. - ОАО «Уралсвязьинформ» — основной поставщик телекоммуникационных услуг Уральского региона.
Система анализа электронного документооборота.