Что такое информатика? Полное вводное руководство

Что такое информатика?

информатика Informatica PowerCenter — это компания по разработке программного обеспечения, предлагающая продукты для интеграции данных. Она предлагает продукты для ETL, маскирования данных, обеспечения качества данных, репликации данных, виртуализации данных, управления основными данными и многого другого. Informatica PowerCenter, инструмент ETL и интеграции данных, является наиболее широко используемым продуктом, поэтому в обиходе термин «Informatica» относится к инструменту Informatica PowerCenter для ETL.

Informatica PowerCenter используется для интеграции данных. Он предоставляет возможность подключаться к различным разнородным источникам, получать из них данные и обрабатывать их. Например, можно подключиться как к одному, так и к другому источнику. SQL Серверная база данных и Oracle базу данных и интегрировать данные в третью систему.

Существуют различные версии PowerCenter:

• Стандартная версия
• Расширенная версия
• Премиум издание

Популярные клиенты, использующие Informatica PowerCenter в качестве... инструмент интеграции данных К числу таких компаний относятся ВВС США, Allianz, Fannie Mae, ING, Samsung и другие. Популярные инструменты, конкурирующие с Informatica, представлены на рынке в следующих категориях: IBM DataStage, Oracle ОВБ, Microsoft SSIS и Ab Initio.

Типичные сценарии использования инструмента Informatica включают:

• Организация, осуществляющая миграцию с существующей устаревшей системы, такой как мэйнфрейм, на новую систему баз данных, для того чтобы можно было выполнить перенос существующих данных в новую систему.
• Предприятиям, создающим хранилище данных, необходим инструмент ETL для перемещения данных из производственной системы в хранилище.
• Интеграция данных из различных разнородных систем, таких как многочисленные базы данных и файловые системы, может быть выполнена с помощью Informatica.
• Informatica также может использоваться в качестве инструмента для очистки данных.

Инструмент ETL от Informatica часто считается лучше своих конкурентов, поскольку предлагает широкий выбор версий продукта, позволяя пользователю выбрать конкретную версию в зависимости от своих потребностей. Informatica постоянно фигурирует в списке лидеров в области интеграции данных в магическом квадранте Gartner.

Технология Informatica доступна для всех популярных платформ. Она предлагает облачные сервисы, поэтому организация может использовать этот инструмент с минимальными затратами на настройку. Informatica обеспечивает интеграцию данных в режиме реального времени. веб-сервисы интеграция, интеграция данных между предприятиями (B2B), версия для работы с большими данными, управление основными данными и коннекторы для социальных сетей и Salesforce. Forbes назвал Informatica следующим Microsoftчто само по себе отражает долю рынка, которую Informatica занимает по сравнению со своими конкурентами.

Зачем нам нужна Informatica?

Informatica используется везде, где имеется система обработки данных, и на серверной стороне необходимо выполнить определенные операции с данными. Это может включать очистку данных, изменение данных на основе набора правил или просто загрузку больших объемов данных из одной системы в другую.

Программное обеспечение Informatica предлагает богатый набор функций, таких как операции с данными на уровне строк, интеграция данных из нескольких структурированных, полуструктурированных или неструктурированных систем, а также планирование операций с данными. Оно также имеет функцию метаданных, благодаря которой сохраняется информация о процессе и операциях с данными.

Информатика PowerCenter Archiтекстура

Informatica PowerCenter использует сервисно-ориентированную архитектуру (SOA), построенную на клиент-серверной модели. Серверная часть выполняет обработку данных, в то время как разработчики работают с помощью отдельных клиентских инструментов.

Основными составными элементами архитектуры являются:

• Домен: Административная единица верхнего уровня, объединяющая все узлы и службы в среде.
• Узел: Логическое представление машины в домене; шлюзовой узел принимает запросы клиентов и направляет их к службам.
• Сервис репозитория: Управляет репозиторием PowerCenter, храня и извлекая метаданные, определяющие карту.pingи рабочие процессы.
• Интеграционная служба: Исполнительный механизм, который запускает рабочие процессы и перемещает данные из источника в целевую систему.

Разработчики подключаются к этим сервисам через четыре клиентских инструмента: Designer, Repository Manager, Workflow Manager и Workflow Monitor, установленных на их компьютерах для создания, управления и мониторинга задач интеграции данных.

Основные возможности Informatica PowerCenter

Informatica PowerCenter пользуется популярностью в корпоративной среде благодаря сочетанию широких возможностей подключения, высокой производительности и эффективного управления. К его ключевым особенностям относятся:

• Широкие возможности подключения: Встроенные коннекторы обеспечивают доступ к реляционным базам данных, мэйнфреймам, текстовым файлам, облачным приложениям и очередям сообщений.
• Богатые преобразования: Обширная библиотека многократно используемых преобразований позволяет обрабатывать сложную логику обработки данных без ручного кодирования.
• Высокая производительность: Разделение данных, оптимизация методом «проталкивания» и параллельная обработка позволяют эффективно перемещать большие объемы данных.
• Проектирование на основе метаданных: Каждая картаping А данные о рабочем процессе сохраняются в виде метаданных, что упрощает повторное использование и аудит заданий.
• Планирование и мониторинг: Рабочие процессы можно планировать и tracОсуществляется централизованно через монитор рабочих процессов.
• Качество данных и управление: Встроенные инструменты поддерживают очистку данных, профилирование и управление основными данными.

В совокупности эти особенности объясняют, почему Informatica неизменно занимает лидирующие позиции в магическом квадранте Gartner по интеграции данных.

Процесс ETL в Informatica

Поскольку Informatica PowerCenter — это инструмент ETL, его основная задача — это...tracПреобразовать данные в целевой файл и загрузить их в него. Понимание этого трехэтапного процесса упрощает освоение остальной части инструмента.

1. Пр.tract: PowerCenter считывает данные из одной или нескольких исходных систем, таких как реляционные базы данных, текстовые файлы, XML или облачные приложения. Определение источника указывает инструменту структуру входящих данных.

2. Преобразование: ЭксtracДанные TED проходят через картуpingгде применяются бизнес-правила. Данные очищаются, объединяются, агрегируются, осуществляется поиск и переформатирование в соответствии с требованиями целевой системы.

3. Загрузка: Обработанные данные записываются в целевую систему, которой часто является таблица хранилища данных, но это также может быть файл или другое приложение. Загрузка может представлять собой полное обновление или инкрементальное обновление.

Эти шаги организованы с помощью трех объектов PowerCenter:

• Картаping: Определяет поток данных от источника к целевому объекту, включая все промежуточные преобразования.
• сессия: Задача, которая запускает одну картуping и указывает сведения о подключении и среде выполнения.
• Процедура: Последовательность из одной или нескольких сессий и других задач, которые служба интеграции выполняет в указанном порядке.

Разработчик создает карту.ping В Designer процесс помещается в сессию и планируется в рамках рабочего процесса. Затем монитор рабочих процессов показывает, был ли каждый запуск успешным, сколько строк было обработано и где возникли ошибки. Это четкое разделение между проектированием, выполнением и мониторингом является одной из главных причин, почему Informatica хорошо масштабируется для крупных проектов хранилищ данных.

Часто задаваемые вопросы (FAQ)