13 коммерческих инструментов извлечения больших данных

В моем последнем блоге мы говорили об инструментах извлечения данных с открытым исходным кодом. Основная цель «инструмента ETL» - собрать содержимое различных баз данных или операционных систем в вашей организации и переместить / скопировать / передать все эти данные в централизованную базу данных. Эту «централизованную базу данных» часто называют «хранилищем данных». В качестве альтернативы инструменты ETL также используются для выполнения сложных преобразований данных, которые сложно выполнить с помощью простых операторов SQL.

Вот список некоторых коммерческих инструментов ETL:

• IBM INFOSPHERE DATASTAGE -

Это инструмент ETL и часть пакета IBM Information Platforms Solutions и IBM InfoSphere. Он использует графические обозначения для построения решений по интеграции данных. Он интегрирует данные из нескольких систем с использованием высокопроизводительной параллельной структуры, а также поддерживает расширенное управление метаданными и корпоративные подключения. Масштабируемая платформа обеспечивает более гибкую интеграцию всех типов данных, включая большие данные в состоянии покоя (на основе Hadoop) или в движении (на основе потоков), на распределенных платформах и платформах мэйнфреймов.

• Службы интеграции Microsoft SQL Server (SSIS) -

Microsoft SSIS - это средство интеграции, преобразования и миграции данных предприятия, встроенное в базу данных Microsoft SQL Server. Его можно использовать для различных задач, связанных с интеграцией, таких как анализ и очистка данных, а также выполнение процессов извлечения, преобразования и загрузки для обновления хранилищ данных.

См. Также:  Обзор 26 методов анализа больших данных

• ЛЮКС ADEPTIA ETL -

Adeptia предлагает полную функциональность ETL в сочетании с простым, интуитивно понятным интерфейсом; давая пользователям возможность преобразовывать ряд различных файлов. Adeptia ETL Suite разработан даже для людей, не являющихся ИТ-специалистами, предоставляя бизнес-пользователям возможность получать доступ к своим данным в режиме реального времени и преобразовывать свои собственные данные в соответствии с их операциями, в то же время позволяя ИТ-специалистам управлять процессами и обеспечивать безопасное и безопасное управление данными. правильно.

• Informatica Powercenter -

Informatica Power Center - это широко используемый инструмент для извлечения, преобразования и загрузки, используемый при создании корпоративных хранилищ данных. Основными компонентами Informatica PowerCenter являются его клиентские инструменты, сервер, сервер репозитория и репозиторий. Сервер Power Center и сервер репозитория составляют уровень ETL, который завершает обработку ETL.

• ДАТАМИГРАТОР IBI IWAY -

Data Migrator - это мощный и комплексный автоматизированный инструмент, предназначенный для значительного упрощения процессов извлечения, преобразования и загрузки (ETL), включая создание, обслуживание и расширение хранилищ данных, витрин данных и операционных хранилищ данных. Интуитивно понятный интерфейс позволяет быстро создавать сквозные процессы ETL с участием гетерогенных структур данных на разнородных вычислительных платформах. Кроме того, функция отслеживания измененных данных загружает в источник данных только измененные записи, значительно сокращая время, необходимое для обновления данных, и упрощая создание хранилища данных в режиме, близком к реальному времени.

См. Также:  Серая область больших данных - что можно и чего нельзя делать

• ETL данных Elixir -

Elixir Data ETL разработан для обеспечения самостоятельного управления данными по требованию для бизнес-пользователей, а также для обработки данных на уровне предприятия. Его парадигма визуального моделирования резко сокращает время, необходимое для разработки, тестирования и реализации извлечения, агрегации и преобразования данных - критически важного процесса для обработки любых приложений, корпоративной отчетности и измерения производительности, а также инициатив по созданию витрин или хранилищ данных.

• СИНХРОНИЗАЦИЯ DMX -

Syncsort DMX переносит все преобразования данных в более производительный механизм ETL в памяти. Преобразования обрабатываются «на лету», что устраняет необходимость в дорогостоящих промежуточных областях базы данных или ручном переносе преобразований в базу данных.

• Управление данными SAS -

SAS Data Management позволяет вашим бизнес-пользователям обновлять данные, настраивать процессы и анализировать результаты самостоятельно, освобождая средства для других проектов. Кроме того, встроенный бизнес-глоссарий, а также возможности управления метаданными SAS и сторонних поставщиков и возможности визуализации происхождения позволяют всем оставаться на одной странице.

• Службы данных SAP -

Он помогает интегрировать, преобразовывать и улучшать данные на уровне проекта или предприятия. Он представляет собой единое решение корпоративного класса для интеграции данных, качества данных, профилирования данных и обработки текстовых данных, которое позволяет пользователям интегрировать, преобразовывать, улучшать и доставлять данные.

• ORACLE DATA INTEGRATOR ENTERPRISE EDITION -

Он предоставляет технологию извлечения нагрузки и преобразования (E-LT), которая повышает производительность и снижает затраты на интеграцию данных - даже в разнородных системах. Обеспечивает высокопроизводительную и низкую совокупную стоимость владения, поддержку гетерогенной платформы для интеграции корпоративных данных и модули знаний для оптимизации производительности и расширяемости разработчиков.

• Мета Люкс -

Meta Suite предлагает вам быструю окупаемость, масштабируемость и богатый выбор поддерживаемых типов исходных и целевых файлов и баз данных. Помимо обычных операций по извлечению, загрузке и объединению операционных данных, его также можно использовать для консолидации и рационализации данных и предоставления поддержки для управления основными данными.

Читайте также:  Руководство по аналитике больших данных для новичков

• ИНТЕГРАТОР ДАННЫХ PERVASIVE -

Теперь это часть Actian. Он выполняет сложные операции интеграции, хотя программное обеспечение удивительно простое в использовании и не требует специального набора навыков. Его богатые возможности интуитивно понятны и настраиваются для проектирования, развертывания и управления - без шока от наклеек. Он имеет тот же полнофункциональный веб-интерфейс, который используется как для локальной, так и для облачной версии.

• Отправленный поток данных -

Это мощный и гибкий механизм интеграции, который собирает данные из разнородных источников. Он разработан Pitney Bowes Software и предоставляет полный набор инструментов преобразования данных для повышения ценности своего бизнеса. Это позволяет анализировать информацию и создавать содержательные отчеты, помогающие понять ваш бизнес.

Читайте также:  15 лучших инструментов для работы с большими данными в 2017 г.

Выбор любого программного обеспечения или инструмента зависит от того, какие требования предъявляются к нему и которые варьируются от бизнеса к бизнесу. Телекоммуникационный бизнес должен обрабатывать большие и сложные данные по сравнению с розничным магазином одежды. Таким образом, телекоммуникационный бизнес выбрал бы инструмент, который имеет функции для работы со сложными данными. В то время как розничный магазин выбрал бы простой в использовании инструмент с меньшими сложностями, поскольку у него нет навыков программирования и технического образования.

В моем следующем блоге я перечислю инструменты для следующего уровня эталонной архитектуры.