Business Intelligence Data Mesh
Architektur und Aufbau eines Data Mesh Data Warehouse auf Google Cloud für über 300 interne Nutzer.
Kunde: Peek&Cloppenburg GmbH & Co. KG · Zeitraum: 2021–2023 · Rollen: Cloud Architect, Data Architect
Bei Peek & Cloppenburg haben wir eine vollständig neue Grundlage für die Business-Intelligence-Infrastruktur auf Google Cloud und BigQuery geschaffen. Ein Team aus 8 Personen — Data Engineers, Analytics Engineers und Analysten — wurde angeleitet, um ein Data Mesh Data Warehouse für mehr als 6 Abteilungen mit über 300 internen Nutzern aufzubauen und zu refaktorisieren. Die gesamte Cloud-Infrastruktur wurde mit Terraform als Infrastructure-as-Code realisiert und ist von der Organisationsebene bis zur einzelnen Ressource vollständig automatisiert und konfigurierbar. Darüber hinaus wurden über 100 Stunden Schulungen für Data Engineers und Cloud Engineers durchgeführt.
Technologien
Google Cloud, Kubernetes, Apache Airflow, BigQuery, Cloud Build, Python, Terraform