Nürnberg, Starnberg, 16. April 2013 – EXAPowerlytics Hadoop Integration Service für SQL- und Map/Reduce-Analysen erschließt strukturierte und unstrukturierten Daten…
Zum Hintergrund: EXASOL, Hersteller der In-Memory-Hochleistungsdatenbank EXASolution, erweitert seine Integration zu Hadoop, der Open-Source-Plattform für die verteilte Bearbeitung von sehr großen Datenmengen ("Big Data"). Um Value Data analysieren zu können, müssen riesige Mengen an Daten schnell geladen werden, damit die Systeme nicht zum Stillstand kommen. Das sehr schnelle Laden von Daten ist eine Fähigkeit, die EXASolution mitbringt. Traditionelle Datenbanksysteme benötigen umfangreiche und zeitintensive Konfigurationen und Optimierung, um Reports und Analysen in akzeptabler Form liefern zu können, oder spezielle Hardware-Plattformen, deren Skalierung bei wechselnden Geschäftsanforderungen schwierig oder kostspielig sein kann.
Durch eine spaltenorientierte, Massiv-Parallel-Processing (MPP)-Architektur sowie Datenkompressions- und Indexierungs-Technologien kann EXASolution Analyseanfragen dynamisch parallel verwalten. So lassen sich tausende gleichzeitige Anwender, anwendergetriebene Reports und Ad-hoc-Anfragen sowie datengetriebene Prozesse im gesamten Unternehmen unterstützen. Mit dem EXAPowerlytics Hadoop Integration Service können Unternehmen nach Herstellerangaben große Mengen unstrukturierter Daten aus Hadoop mit dem EXASOL Data Warehouse integrieren. Darin lassen sich diese mit den bereits vorhandenen Unternehmensdaten wie Kundenprofilen oder finanzwirtschaftliche Kennzahlen verknüpfen und analysieren. Der eigentliche Mehrwert für den Kunden liegt genau dort, wo unstrukturierte Daten außerhalb der Datenbank mit strukturierten Daten in den relationalen Datenbanken zusammenkommen. Unternehmen sind so in der Lage, ihren Return on Invest zu steigern. Sie gelangen früher zu Erkenntnissen aus der Analyse von Geschäftsprozessen, bei niedrigem Aufwand und Kosten. Einfache Interaktion zwischen Hadoop und EXASolution
EXASOL liefert mit EXAPowerlytics die Möglichkeit, externe Services in beliebigen Programmiersprachen in die parallele SQL-Verarbeitung von EXASolution einzubinden. Der Hadoop Integration Service stellt eine spezielle Lösung dar, die die Kommunikation zwischen EXASolution und Hadoop übernimmt. Ein transparenter Zugriff auf Hadoop ist jederzeit möglich. Da EXASolution selbst über Map/Reduce Fähigkeiten verfügt, kann die Analysearbeit sogar flexibel zwischen Hadoop und EXASolution verteilt werden. Somit wird das Data Warehouse mit einem Hadoop-System vereint.
- Mit Hadoop können riesige Datenmengen mittels Map/Reduce-Programmen bzw. Algorithmen parallel auf Computerclustern analysiert werden. Häufig werden Log-Dateien von mehreren tausend Webservern durchsucht, um Daten für Reportings zusammenzufassen. Unternehmen können Hadoop beispielsweise auch nutzen, um Daten zu sammeln und umzuwandeln oder um große Mengen von Bildern, Texten sowie sozialen Netzwerken zu analysieren.
Zitat: „Unser Alleinstellungsmerkmal liegt vor allem darin, dass wir auf die Map/Reduce-Algorithmen, die in Hadoop ablaufen, direkt Einfluss nehmen können“, sagt Sebastian Klenk, Produktmanager bei EXASOL. „Während Hersteller vergleichbarer Datenbanken lediglich auf das HDFS (Hadoop Distributed File System) zugreifen oder Ergebnisse von kompletten Ha-doop-Jobs importieren können, ist es mit EXASolution möglich, bestimmte Teil-Jobs, wie z.B. den Map- oder den Reduce-Schritt flexibel zwischen Hadoop und EXASolution aufzuteilen. Die Vorteile liegen somit auf der Hand: es können beliebige Aufgaben an Hadoop delegiert werden und die Datenanalysen laufen weiterhin parallel und extrem leistungsstark in EXASolution“. Die Vorteile des EXAPowerlytics Hadoop Integration Service im Überblick:
- Analyse-Jobs können flexibel zwischen Hadoop und EXASolution aufgeteilt werden
- Schnellstmögliche Verknüpfung der Data Warehouse-Daten mit Hadoop-Daten
- Native Verzahnung mit SQL
- Leistungsstarker Datentransfer zwischen Hadoop und EXASolution
Weitere Informationen unter:
http://www.exasol.com/exasolution/hadoop-integration-service.html