Wir sind ein spezialisiertes Beratungsunternehmen mit klarem Fokus auf die Databricks Lakehouse Plattform. Aufgrund der steigenden Nachfrage nach modernen Daten- und KI-Lösungen erweitern wir unsere Databricks Kompetenz und suchen erfahrene Experten, die anspruchsvolle Datenplattformen für unsere Kunden konzipieren, entwickeln und betreiben.

Bei uns arbeiten Sie in einem hochqualifizierten Team, gestalten technische Entscheidungen aktiv mit und unterstützen Unternehmen bei der Modernisierung ihrer Datenlandschaften.

Ihre Aufgaben

• Konzeption, Entwicklung und Betrieb produktionsreifer Databricks Lakehouse Lösungen
• Entwicklung von Structured Streaming Pipelines mit Python und PySparkk
• Verantwortung für die Weiterentwicklung von Unity Catalog Governance zur Sicherstellung sicherer, auffindbarer und gut verwalteter Datenbestände
• Entwicklung und Wartung ereignisgesteuerter Datenpipelines in enger Zusammenarbeit mit Backend Engineering Team
• Implementierung und Betreuung von CI/CD Pipelines in Azure DevOps für automatisierte und zuverlässige Databricks Deployments
• Erstellung hochwertiger, analysefähiger Datensätze zur Generierung skalierbarer Business Insights
• Kontinuierliche Optimierung von Performance, Stabilität, Automatisierung, Monitoring und Observability der Databricks Plattform
• Mitarbeit an Architekturentscheidungen und technischen Standards
• Betrieb und Optimierung geschäftskritischer Databricks Lösungen in Produktionsumgebungen

Ihr Profile

• Fundierte praktische Erfahrung in der Konfiguration und Verwaltung von Databricks Umgebungen, einschließlich Cluster Management, Dependency Management und Paketinstallationen
• Umfangreiche Erfahrung mit Azure Databricks in produktiven Enterprise Umgebung
• Nachweisbare Erfahrung in der Entwicklung von Spark und Databricks Pipelines mit Python und PySpark
• Erfahrung in der End to End Implementierung von Databricks Lösungen
• Fähigkeit, Architektur und Designentscheidungen innerhalb von Databricks Plattformen zu treffen
• Tiefgehendes Verständnis von Spark Internals, Performance Optimierung und Cluster Konfiguration
• Erfahrung im Betrieb geschäftskritischer Databricks Lösungen
• Kenntnisse in Azure DevOps und modernen CI/CD Prozessen
• Sehr gute Kommunikations und Beratungsfähigkeiten