Компоненти сховища даних

Сховища даних включають до свого складу набір компонентів, серед яких можна виділити змістовні, що відповідають наборам даних, і управлінські, що виконують спеціальні функції керування (рис. 5.1). Розглянемо їх особливості.

Менеджер завантаження виконує диспетчерські функції щодо занесення нових даних до сховища за встановленим регламентом, згідно з яким дані екстрагуються з різноманітних джерел, перевіряються, певним чином відбираються, зазнають трансформації (приводяться до єдиного способу кодування, виду і формату) та завантажуються у сховище.

Менеджер сховища виконує операції аналізу й управління даними. Ці операції включають: аналіз узгодженості та несуперечності даних; перетворення та переміщення даних з тимчасового сховища в основні таблиці сховища даних; створення індексів; денормалізація даних у разі її необхідності; агрегація (узагальнення) даних; резервне копіювання та архівування даних.

Детальні (оперативні) дані - включають всі детальні дані, визначені схемою сховища даних. Це можуть бути первинні дані найнижчого рівня деталізації або узагальнені до певного рівня деталізації.

Агреговані дані - ця складова містить дані, попередньо оброблені під керівництвом менеджера сховища з метою їх часткового чи повного узагальнення. Дані у цій частині сховища призначені для прискорення виконання запитів і тому можуть змінюватись відповідно до змін їх змісту. Крім того, агреговані дані оновлюються по мірі надходження нових детальних даних до сховища.

Репозиторій метаданих - містить інформацію про дані, що зберігаються у сховищі. Структура і зміст метаданих залежать від їх призначення і можуть бути визначені в розрізі цілей їх використання:

Вибірка й завантаження даних. Метадані містять інформацію про джерела даних, способи та періодичність їх вибірки і завантаження.

Обслуговування сховища. Метадані використовуються для автоматизації процедур узагальнення даних.

Обслуговування запитів. Метадані використовуються для визначення переліку таблиць для виконання запитів.

Менеджер запитів - виконує операції, пов’язані з управлінням запитами користувачів. Компонент функціонує на базі СУБД, що підтримує сховище даних, а також спеціально розроблених програм.

Користувачі сховища отримують до нього доступ за допомогою спеціальних засобів, до яких можуть бути віднесені OLAP-інструменти, засоби добування даних Data Mining, та різні засоби доступу кінцевого користувача: створення запитів і звітів, виконавські системи та ін.

Види сховищ даних

В залежностй від повноти подання даних виділяють такі види сховищ даних.

Корпоративні сховища даних (enterprise data warehouses) - вміщують інтегровану інформацію, зібрану із певної множини оперативних баз даних, яка характеризує всю корпорацію і необхідна для здійснення консолідованого аналізу діяльності корпорації в цілому. Такі сховища містять дані по всіх напрямках діяльності корпорації і використовуються для підтримки прийняття як тактичних, так і стратегічних рішень. Обсяг корпоративного сховища може коливатися від 50 Гбайт до кількох терабайт, а його створення потребує значних витрат праці і часу (до кількох років).

Кіоски або вітрини даних (data marts) - це певна підмножина корпоративних даних, які характеризують конкретний аспект діяльності корпорації, наприклад, облік запасів чи маркетинг. У вітрини даних інформація може вибиратись або з корпоративного сховища (залежні вітрини), або безпосередньо із оперативних баз даних, проходячи попередні узгодження та перетворення (незалежні вітрини). Розробка кіоску даних є набагато менш трудомісткою, ніж сховища, і триває приблизно 3 - 4 місяці.

Побудова корпоративних сховищ і кіосків даних здійснюється за однаковими принципами і з використанням однакових технологій.

Відоме також поняття глобального сховища даних, яке розглядається як єдине джерело інтегрованих даних для всіх вітрин даних.