
Consumer Goods & Retail - Migration einer AWS-Datenplattform zu Google Cloud
Consumer Goods & Retail
Ein führendes Einzelhandels- und E‑Commerce-Unternehmen migrierte mit Unterstützung von synvert seine bestehende Datenplattform von AWS und Cloudera zu Google Cloud, um Kosten zu optimieren und moderne cloud-native Technologien zu nutzen. Durch die Entwicklung eines Data Lakes in Google Cloud und die Implementierung bewährter Verfahren in der Software- und Datenentwicklung, hat synvert einen schnelleren Datenzugriff und eine effizientere Datenaggregation für Analysen erreicht. Dies führte zu erheblichen Zeitersparnissen und einer höheren Frequenz regelmäßiger Geschäftsberichte, wodurch zeitnahe Unternehmensentscheidungen ermöglicht wurden.
Ausgangslage
Die Infrastruktur sowie mehrere bestehende Datenprodukte werden von AWS und Cloudera auf Google Cloud migriert.
Solution
Das Ziel war die Migration einer Datenplattform von AWS zu Google Cloud. Die Infrastruktur wurde mittels Infrastructure as Code mit Terraform/Terragrunt aufgebaut.
Mehrere Datenprodukte wurden auf Google Cloud-native Dienste umgestellt: Datenpipelines auf Basis von Apache Spark, SQL-Workloads und Cloudera-Pipelines, die nun in Google BigQuery verfügbar sind.
Die Architektur
Die Architektur ist auf der Google Cloud Plattform umgesetzt. Hierbei werden Technologien wie Google BigQuery, Google Cloud Composer, Google Cloud IAM, Google Cloud SQL, Google Cloud Storage, Google Compute Engine, Google DataProc, git, GitLab, CI / CD, Scala, Python, Docker, SQL und IaC (Terraform, Terragrunt) verwendet.
synvert Vorteile
Die AWS Lösung könnte nach einem Jahr abgeschaltet werden.