13 Tools zur kommerziellen Datenextraktion von Big Data

In meinem letzten Blog haben wir über Open-Source-Tools zur Datenextraktion gesprochen. Das Hauptziel eines „ETL-Tools“ besteht darin, den Inhalt verschiedener Datenbanken oder Betriebssysteme in Ihrem Unternehmen zu sammeln und all diese Daten in eine zentrale Datenbank zu verschieben/kopieren/übertragen. Diese „zentrale Datenbank“ wird oft als „Data Warehouse“ bezeichnet. Alternativ werden ETL-Tools auch verwendet, um komplexe Datentransformationen durchzuführen, die mit einfachen SQL-Anweisungen nur schwer durchzuführen sind.

Hier ist eine Liste einiger kommerzieller ETL-Tools:

• IBM INFOSPHERE-DATENSTAGE –

Es ist ein ETL-Tool und Teil der IBM Information Platforms Solutions Suite und IBM InfoSphere. Es verwendet eine grafische Notation, um Datenintegrationslösungen zu erstellen. Es integriert Daten über mehrere Systeme hinweg mithilfe eines leistungsstarken parallelen Frameworks und unterstützt erweitertes Metadatenmanagement und Unternehmenskonnektivität. Die skalierbare Plattform bietet eine flexiblere Integration aller Arten von Daten, einschließlich Big Data at Rest (Hadoop-basiert) oder in Bewegung (streambasiert), auf verteilten und Mainframe-Plattformen.

• Microsoft SQL Server-Integrationsdienste (SSIS) –

Microsoft SSIS ist ein Tool zur Unternehmensdatenintegration, Datentransformation und Datenmigration, das in die SQL Server-Datenbank von Microsoft integriert ist. Es kann für eine Vielzahl von integrationsbezogenen Aufgaben verwendet werden, wie zum Beispiel das Analysieren und Bereinigen von Daten und das Ausführen von Extraktions-, Transformations- und Ladeprozessen, um Data Warehouses zu aktualisieren.

Siehe auch:  Ein Einblick in 26 Big-Data-Analysetechniken

• ADEPTIA-ETL-SUITE –

Adeptia bietet volle ETL-Funktionalität kombiniert mit einer einfachen, intuitiven Benutzeroberfläche; Benutzern die Möglichkeit geben, eine Reihe verschiedener Dateien zu transformieren. Die Adeptia ETL Suite wurde auch für Nicht-IT-Personen entwickelt und gibt den Geschäftsbenutzern die Möglichkeit, in Echtzeit auf ihre Daten zuzugreifen und ihre eigenen Daten an ihren Betrieb anzupassen, während die IT weiterhin Prozesse verwalten und sicherstellen kann, dass die Daten sicher verwaltet werden und korrekt.

• Informatica-Powercenter –

Informatica Power Center ist ein weit verbreitetes Extraktions-, Transformations- und Ladetool, das beim Aufbau von Enterprise Data Warehouses verwendet wird. Die Hauptkomponenten von Informatica PowerCenter sind die Client-Tools, der Server, der Repository-Server und das Repository. Der Power Center-Server und der Repository-Server bilden die ETL-Schicht, die die ETL-Verarbeitung abschließt.

• IBI IWAY DATAMIGRATOR –

Data Migrator ist ein leistungsstarkes und umfassendes automatisiertes Tool, das Extraktions-, Transformations- und Ladeprozesse (ETL) drastisch vereinfacht, einschließlich der Erstellung, Wartung und Erweiterung von Data Warehouses, Data Marts und Betriebsdatenspeichern. Eine intuitive Benutzeroberfläche ermöglicht eine schnelle End-to-End-ETL-Prozesserstellung mit heterogenen Datenstrukturen auf verschiedenen Computerplattformen. Darüber hinaus lädt eine Änderungsdatenerfassungsfunktion nur geänderte Datensätze in Ihre Datenquelle, wodurch die zum Aktualisieren von Daten erforderliche Zeit drastisch reduziert und ein Data Warehouse nahezu in Echtzeit ermöglicht wird.

Siehe auch:  Die Big-Data-Grauzone – Do's and Don'ts

• Elixier-Daten-ETL –

Elixir Data ETL wurde entwickelt, um eine On-Demand-Self-Service-Datenbearbeitung für Geschäftsanwender sowie für Datenverarbeitungsanforderungen auf Unternehmensebene bereitzustellen. Sein visuelles Modellierungsparadigma reduziert drastisch die Zeit, die für das Entwerfen, Testen und Implementieren von Datenextraktion, -aggregation und -transformation erforderlich ist – ein kritischer Prozess für jede Anwendungsverarbeitung, Unternehmensberichterstattung und Leistungsmessung, Data Mart oder Data Warehousing-Initiativen.

• SYNCSORT-DMX –

Syncsort DMX bringt alle Datentransformationen in eine leistungsfähigere In-Memory-ETL-Engine. Transformationen werden im laufenden Betrieb verarbeitet, wodurch kostspielige Datenbank-Staging-Bereiche oder das manuelle Pushen von Transformationen in die Datenbank überflüssig werden.

• SAS-Datenmanagement –

SAS Data Management ermöglicht es Ihren Geschäftsanwendern, Daten zu aktualisieren, Prozesse zu optimieren und Ergebnisse selbst zu analysieren, um Zeit für andere Projekte zu haben. Darüber hinaus sorgen ein integriertes Geschäftsglossar sowie SAS- und Drittanbieter-Metadatenverwaltungs- und Herkunftsvisualisierungsfunktionen dafür, dass alle auf dem gleichen Stand sind.

• SAP-Datendienste –

Es hilft bei der Integration, Transformation und Verbesserung von Daten auf Projekt- oder Unternehmensebene. Es bietet eine einzige Lösung der Enterprise-Klasse für Datenintegration, Datenqualität, Datenprofilerstellung und Textdatenverarbeitung, die es Benutzern ermöglicht, Daten zu integrieren, zu transformieren, zu verbessern und bereitzustellen.

• ORACLE DATA INTEGRATOR ENTERPRISE EDITION –

Es bietet die Extract Load and Transform (E-LT)-Technologie, die die Leistung verbessert und die Kosten für die Datenintegration senkt – sogar über heterogene Systeme hinweg. Bietet hohe Leistung und niedrigere Gesamtbetriebskosten, heterogene Plattformunterstützung für die Integration von Unternehmensdaten und Wissensmodule für optimierte Entwicklerproduktivität und Erweiterbarkeit.

• Meta-Suite –

Meta Suite bietet Ihnen eine schnelle Wertschöpfung, Skalierbarkeit und eine große Auswahl an unterstützten Quell- und Zieldatei- und Datenbanktypen. Neben dem normalen Betrieb des Extrahierens, Ladens und Zusammenführens von Betriebsdaten kann es auch zur Konsolidierung und Rationalisierung von Daten verwendet werden und bietet als solche Unterstützung für das Stammdatenmanagement.

Lesen Sie auch:  Ein Leitfaden für Anfänger zur Big-Data-Analyse

• DATENINTEGRATOR VON PERVASIVE –

Es ist jetzt Teil von Actian. Es führt komplexe Integrationsvorgänge durch, obwohl die Software bemerkenswert einfach zu bedienen ist und keine speziellen Fähigkeiten erfordert. Seine umfangreichen Funktionen sind äußerst intuitiv und für Design, Bereitstellung und Verwaltung konfigurierbar – ohne den Aufkleberschock. Es verfügt über dieselbe voll funktionsfähige Web-Benutzeroberfläche, die sowohl für On-Premise- als auch für Cloud-Versionen verwendet wird.

• Sagent-Datenfluss –

Es ist eine leistungsstarke und flexible Integrations-Engine, die Daten aus unterschiedlichen Quellen zusammenführt. Es wurde von Pitney Bowes Software entwickelt und bietet ein umfassendes Set an Datentransformationstools, um den Geschäftswert zu steigern. Es ermöglicht die Analyse von Informationen und die Erstellung aussagekräftiger Berichte, um das Verständnis Ihres Unternehmens zu erleichtern

Lesen Sie auch:  Top 15 Big Data Tools im Jahr 2017

Die Wahl einer Software oder eines Tools hängt davon ab, welche Art von Anforderungen man hat und die von Unternehmen zu Unternehmen unterschiedlich sind. Ein Telekommunikationsunternehmen hätte im Vergleich zu einem Bekleidungsgeschäft große und komplexe Daten zu handhaben. Ein Telekommunikationsunternehmen würde also ein Tool auswählen, das über Funktionen verfügt, um mit komplexen Daten zu arbeiten. Ein Einzelhandelsgeschäft hingegen würde sich für ein einfach zu bedienendes Tool mit weniger Komplexität entscheiden, da es nicht über die Programmierkenntnisse und den technischen Hintergrund verfügt.

In meinem nächsten Blog würde ich Werkzeuge für die nächste Schicht in der Referenzarchitektur auflisten.