Senior Cloud Data & AI Engineer (m/w/d) - Databricks

Du willst nicht nur einzelne Datenpipelines entwickeln, sondern moderne Daten- und AI-Plattformen in der Cloud mitgestalten?

Du denkst in belastbaren Architekturen, produktiven Deployments und sauberem Engineering statt in isolierten Prototypen?

Dann könnte das hier gut passen:

Wir suchen einen Senior Cloud Data & AI Engineer, der moderne Data- & AI-Plattformen auf Basis von Databricks nicht nur konzipiert, sondern zum Leben erweckt. Als Architekt und Macher verbindest du Data Engineering, Cloud-Strukturen und AI-Lösungen zu produktiven Systemen, die skalierbar, wartbar und für unsere Kunden businessrelevant sind.

Tätigkeiten

✅Deine Aufgaben umfassen:

• Konzeption und Implementierung moderner Data- & AI-Plattformen auf Basis von Databricks
• Entwicklung robuster und performanter Batch- und Streaming-Pipelines mit Python, SQL, Spark und PySpark
• Arbeit an skalierbaren Lakehouse-Architekturen für Analytics-, ML- und GenAI-Anwendungsfälle
• Nutzung zentraler Databricks-Komponenten wie Delta Lake, Unity Catalog, Workflows, MLflow, Model Serving und Vector Search in produktiven Umgebungen
• Unterstützung beim Aufbau und der Operationalisierung von ML-, LLM- und GenAI-Use-Cases
• Arbeit an Themen wie Serving, Retrieval, Evaluation, Monitoring und Governance für moderne AI-Anwendungen
• Integration unterschiedlicher Quellsysteme wie APIs, Datenbanken, ERP- oder CRM-Systeme
• Technische Umsetzung von Anforderungen rund um Data Quality, Security, Governance und Observability
• Automatisierung von Deployments und technischen Standards mit Git, CI/CD und Infrastructure as Code
• Beratung von Kunden und internen Stakeholdern bei Architekturentscheidungen rund um Datenplattformen und AI-Lösungen
• Wissensaustausch im Team, technische Orientierung und Unterstützung weniger erfahrener Kolleginnen und Kollegen

Anforderungen

Was du mitbringst:

• Mehrjährige Erfahrung im Bereich Data Engineering, Machine Learning Engineering, AI Engineering oder in einer vergleichbaren Rolle
• Sehr gute Kenntnisse in Databricks
• Sehr gute Kenntnisse in Python, SQL, Spark und PySpark
• Praxiserfahrung mit mindestens einer Cloud-Plattform, idealerweise Azure oder AWS
• Erfahrung im Aufbau und Betrieb moderner Datenplattformen in der Cloud
• Erfahrung mit MLflow, Model Serving und Vector Search, idealerweise im Databricks-Umfeld
• Gute Kenntnisse in modernen AI-/LLM-Architekturen, z. B. rund um RAG, Retrieval, Evaluation, Serving und produktive GenAI-Anwendungen
• Gutes Verständnis für Lakehouse-Architekturen, Datenmodellierung und produktive Datenprozesse
• Erfahrung in den Bereichen Data Governance, Data Quality, Security und Monitoring
• Sicherer Umgang mit Git, CI/CD und idealerweise Infrastructure as Code
• Abgeschlossenes Studium in Wirtschaftsinformatik, Informatik, Data Science oder einem vergleichbaren Studiengang
• Strukturierte, eigenverantwortliche und lösungsorientierte Arbeitsweise

Team

Was dich bei uns erwartet: High-End Tech & echte Verantwortung.

• Platform & Architecture Excellence: Du konzipierst und baust skalierbare Cloud Data & AI Plattformen. Wir setzen auf sauberes Engineering und architektonische Tiefe – fernab von Prototyp-Basteleien. ️
• Vom Experten zum Trusted Advisor: Wir fördern deine Entwicklung zum strategischen Berater. Durch anspruchsvolle Projekte bei agilen Startups und DAX-Konzernen wirst du zum geschätzten Partner auf Augenhöhe.
• Gestaltungsspielraum & Innovation: Deine kreativen Lösungsansätze sind gefragt. Wir bieten dir den Freiraum, innovative Konzepte nicht nur zu denken, sondern direkt in die Produktion zu bringen.
• Expertise trifft Teamgeist: Werde Teil unseres internationalen Teams, in dem Leidenschaft für Daten auf eine Kultur der Eigenverantwortung und des offenen Feedbacks trifft. ‍
• Investition in Deine Zukunft: Wir unterstützen deine Ambitionen durch volle finanzielle Förderung für Zertifizierungen (z. B. Databricks, Cloud-Provider) und kontinuierliche Weiterbildung.
• State-of-the-Art Equipment: Arbeite mit den neuesten Technologien und erstklassigem Equipment (Premium-Notebook & Smartphone), um bei unseren Kunden und im Team zu glänzen.
• Kultur der Transparenz: Wir setzen auf Ehrlichkeit und regelmäßigen Austausch. Erfolge feiern wir gemeinsam - im modernen Office in Essen oder auch mal bei einem Kaltgetränk nach Feierabend. ⚒️
• Zukunftssicherheit & Balance: Ein sicherer Arbeitsplatz in einer Wachstumsbranche mit attraktiver Vergütung und Home-Office-Optionen für deine ideale Work-Life-Balance. ✨

Bewerbungsprozess

‍➡️Dein Weg in unser Team:

• Step 1: Das Kennenlernen (Culture Fit) Nach deiner Bewerbung laden wir dich zu einem ersten Video-Call mit unserer HR-Managerin Jana ein. Hier tauschen wir uns ganz unverbindlich über deine Motivation und unsere Unternehmenskultur aus – wir wollen herausfinden, ob wir menschlich zusammenpassen. (ca. 30 - 40 Min.)
• Step 2: Deep Dive (Fachlicher Austausch) In der zweiten Runde geht es in die Tiefe. Wir laden dich vorzugsweise persönlich in unser Office nach Essen ein (alternativ per Video), um mit unserer Gründer- und Partner-Crew über fachliche Konzepte, deine methodische Herangehensweise und erste Projektideen zu sprechen. (ca. 60 - 90 Min.)
• Step 3: Finaler Check (Optional) Qualität und Passgenauigkeit sind uns wichtig. In seltenen Fällen vereinbaren wir ein drittes, kurzes Gespräch, um spezifische offene Punkte zu klären oder letzte Details zu deiner zukünftigen Rolle zu besprechen.
• Step 4: Welcome on Board! Wenn alles passt, folgt die finale Phase: Wir unterbreiten dir ein attraktives Vertragsangebot und freuen uns darauf, gemeinsam mit dir die Datenstrategien unserer Kunden auf das nächste Level zu heben.