Решения Решения
Интеграционные решения Интеграционные решения

Интеграционное решение — это комплексное решение для извлечения, преобразования и загрузки данных, обеспечивающее заполнение хранилища данных и его синхронизацию с данными из разнородных источников, с которыми работают все бизнес-приложения, используемые в организации.

Слияние данных из разнородных хранилищ
Обычно информация хранится во множестве различных систем, а извлечение данных из всех источников и их слияние в единый согласованный набор может представлять собой довольно сложную задачу. Консолидация данных может понадобиться в различных ситуациях, например:

  • множество организаций хранят архивные данные в традиционных системах хранилищ. Эти данные могут быть не слишком важными для ежедневных операций, однако они могут иметь ценность для анализа трендов, когда необходимы объемы информации за длительный период;

  • филиалы организации могут использовать разные технологии для хранения операционных данных. Пакету может потребоваться извлечь информацию из электронных таблиц, а также из реляционных баз данных перед тем, как он сможет объединить эти данные;

  • данные могут храниться в базах данных, которые используют различные схемы для одних и тех же данных. Пакету может потребоваться изменить тип данных столбца или объединить данные из нескольких столбцов в один перед тем, как он сможет объединить данные.

Очистка и стандартизация данных
Перед загрузкой данных в БД для оперативной обработки транзакций (OLTP), в БД оперативной аналитической обработки (OLAP), рабочий лист Excel или файл данные необходимо очистить и стандартизировать. Это может потребоваться по следующим причинам:

  • Данные были получены из нескольких филиалов организации, и каждый филиал использовал разные стандарты и соглашения. Перед тем, как данные могут быть использованы, может потребоваться преобразовать их в другой формат (например, объединить имя и фамилию в один столбец).

  • Данные могут быть арендованными или приобретенными. Перед их использованием может потребоваться стандартизация и очистка для соответствия стандартам делопроизводства (например, какая-либо организация желает проверить, что все записи содержат один набор кодов регионов или один и тот же набор названий продукции). 

  • Формат данных зависит от языкового стандарта (например, данные могут иметь различные форматы даты-времени, а также форматы чисел). Если данные объединены из источников разных языковых стандартов, то перед загрузкой их необходимо привести в один формат во избежание повреждения.