Highlight unseres dritten Apache Hop Meetup war Matt Casters (PMC Member) Ankündigung von Hop in der Cloud. Er berichtete über Hop Managed Services und die Lauffähigkeit von Hop mit Containern, Spark & Co.
Anschließend sprach Bart Maertens (PMC Member) über die Bedeutung der Community für das Apache Top-Level Projekt Hop.
Stefan Beck (publicplan) hat Hop containerisiert. Er beschrieb wie er seinen gesamten BI-Stack, mit Hop als ETL-Bestandteil, auf Docker umgesetzt hat.
Als Premiere zeigte Philipp Heck (it-novum), wie Sie Streamingdaten mit Apache Hop verarbeiten. Er hatte eine entsprechende Kafka Transformation verbessert.
Agenda
10:00 - 10:05 Uhr | Begrüßung durch den Gastgeber
I would love to talk about how we can keep track of what Apache Hop is doing when it runs in exotic locations like schedulers, containers, Spark and so on.
With a bit of luck we should have things to show by “Hop-as-a-service”.
As an Apache top-level project, the community of users and developers is crucial for Apache Hop.
In this session, we’ll take a look at how the open-source development model works and how working with Apache Hop is mutually beneficial for both the project and the community.
- Übersicht des eingesetzten BI-Stacks (Apache-Hop, MariaDB, Grafana)
- Wie man den BI-Stack mit Docker containerisiert (Aufbau und Ablauf)
- Ein Task-Scheduler für die Apache Hop-Workflows
Kafka Daten im Batch-Verfahren auslesen geht nicht? Philipp Heck zeigt wie Sie mit Apache Hop Streaming Daten aus Kafka im Batchverfahren auslesen können und so Kafka als weitere Datenquelle für ihr DWH nutzen können.
11:25 - 11:45 Uhr | Gesprächsrunde mit den Apache Hop Entwicklern
Über it-novum
it-novum ist Teil der börsennotierten Allgeier SE mit 3000 Mitarbeitern und 42 Standorten weltweit. Als führendes IT-Beratungsunternehmen für Business Open Source umfasst das Portfolio Lösungen für Big Data Analytics und IoT, Enterprise Information Management und IT-Service Management.
Wir implementieren kundenindividuelle Lösungen für Datenintegration, Data Analytics und IoT – z.B. für Bundespolizei, Wiener Wohnen, Deutsche See. Dazu nutzen wir führende Technologien, wie von Hitachi Vantara (Pentaho), Snowflake oder Jedox.
Über Apache Hop
Apache Hop (Hop Orchestration Platform) ist eine neue Plattform für Data Engineering und Data Orchestration. Hop gibt Datenexperten ein integriertes Tool Set und Best Practices an die Hand, um ihr Datenprojekt selbst umzusetzen.
