Apache Hop – der nächste große Sprung in der Datenintegration
Seite 3: Blick nach vorn
Wie sehen die nächsten Schritte bei der Weiterentwicklung von Apache Hop aus? Nach Einschätzung des Autors stehen drei wichtige neue Features auf der Roadmap. Punkt eins ist die Erstellung eines neuen Softwaremarktplatzes, auf dem Plug-ins von Drittanbietern zu finden sind. Dabei kann es sich beispielsweise um Verbindungen zu weiteren Datenbanken, neue Transformationsmöglichkeiten und Verbindungen zu Anwendungen großer ERP-Anbieter handeln. Laut den Hop-Entwicklern soll zudem Apache Airflow als weitere Workflow-Engine integriert werden, um mehr Flexibilität bei deren Ausführung zu bieten. Drittens soll es in Zukunft eine neue GUI zum Anzeigen der Vorschau und zum Debuggen von Pipelines und Workflows unter Berücksichtigung lang andauernder und Streaming-Workloads geben.
Übersicht über die Datenprozesse
Datenprozesse müssen einfach zu entwerfen, simpel zu testen, schnell auszuführen und rasch bereitzustellen sein. Durch die visuelle Drag-and-drop-Benutzeroberfläche ermöglicht es Apache Hop Personen aller Qualifikationsstufen, produktiv mit Daten zu arbeiten, ohne Code schreiben zu müssen. Damit empfiehlt sich das Open-Source-Projekt Apache Hop als vielversprechende Option für anspruchsvolle Datenprojekte. In der kurzen Zeit, die das Projekt zur Verfügung steht, hat es auf jeden Fall das Arbeitsleben des Autors dieses Beitrags spürbar bereichert. Die Plattform dürfte insbesondere für Nicht-Hardcore-Entwickler interessant sein, die selbst eigene Daten-Pipelines erstellen wollen.
Die Datenwelt wird sich auch in Zukunft schnell weiterentwickeln. Um auf den Fortschritt von Cloud-Umgebungen und Laufzeitumgebungen gezielt reagieren zu können, ist es ratsam, auf eine flexible Open-Source-Plattform zu bauen, die sich durch metadatengetriebene Plug-ins jederzeit der sich schnell ändernden Technologielandschaft anpasst.
Wer Interesse an Apache Hop hat und einen detaillierten Einblick in die Software und deren Möglichkeiten gewinnen möchte, sollte an einem der nächsten Apache-Hop-User-Meetups teilnehmen. Dort lernt man die deutschsprachige Hop-Community sowie Entwicklerinnen und Entwickler persönlich kennen. Weitere Informationen sowie Videoaufzeichnungen vergangener Apache-Hop-User-Meetings finden sich in der Terminübersicht bei it-novum.
Philipp Heck
arbeitet seit 2014 als Senior Consultant im Bereich Data Engineering und Data Analytics bei it-novum. In dieser Funktion betreut er Projekte im Bereich Business Analytics, Data Warehousing, Datenintegration und Planung.
(map)
