Senior Data Engineer (PySpark)

Als Senior Data Engineer bist du verantwortlich für den Aufbau hochwertiger, skalierbarer Datenpipelines, die Definition robuster Datenarchitekturen und die Sicherstellung von Qualität und Performance über den gesamten Stack hinweg. Im Einzelnen wirst du:

• Robuste Datenpipelines mit PySpark und Apache Spark entwerfen, implementieren und optimieren.
• Architektonische Entscheidungen mit modernen Datenplattformen wie Databricks aufbauen und begleiten.
• Best Practices für Batch- und Streaming-Datenverarbeitung anwenden, um datengetriebene Initiativen zu unterstützen.
• Mit funktionsübergreifenden Stakeholdern in großen Unternehmen zusammenarbeiten – idealerweise bringst du Erfahrung in den Bereichen Bankwesen, Versicherungen oder Finanzdienstleistungen mit.
• In einem funktionsübergreifenden, internationalen Team in einem dynamischen Unternehmensumfeld mitwirken.
• Gegebenenfalls Junior Engineers betreuen und anleiten.

Anforderungen

Wir legen großen Wert auf individuelle Erfahrung und nicht nur auf formale Anforderungen. Dennoch gibt es einige essentielle Fähigkeiten, die für diese Position erforderlich sind:

• Abgeschlossenes Studium in Informatik oder einem verwandten Bereich.
• Mindestens 5 Jahre Erfahrung im Bereich Data Engineering, mit fundierter Expertise in PySpark, Spark und verteiltem Rechnen.
• Sehr gute SQL-Kenntnisse, insbesondere in Optimierung, Window Functions und komplexen Transformationen.
• Erfahrung mit Databricks oder anderen Low-Code-Datenplattformen für Unternehmen.
• Tiefes Verständnis moderner Datenarchitekturen (Data Lakehouse, Warehouse, Streaming-Systeme).
• Gute Scripting-Fähigkeiten in Python für Datentransformation und Automatisierung.
• Fundierte Kenntnisse in den Bereichen Datenqualität, Schema-Evolution und Monitoring.
• Erfahrung mit Versionskontrollsystemen (z. B. Git).
• Sehr gute Englischkenntnisse in Wort und Schrift.
• Wohnsitz in Portugal und Berechtigung zur Arbeitsaufnahme.

Wünschenswerte Zusatzqualifikationen

• Vertrautheit mit Azure Cloud (Zertifizierung von Vorteil).
• Erfahrung als Backend- oder Full-Stack-Entwickler (z. B. Python / Node.js / Java / C# / C++).
• Verständnis von Lambda-/Kappa-Architekturen und deren Einsatz in Echtzeit-Analytics.
• Fundierte Kenntnisse in CI/CD-Prozessen.
• Erfahrung mit Container-Technologien (Docker, Kubernetes).
• Nachgewiesene Erfahrung in der Leitung oder Mentoring von Teams im Unternehmensumfeld.
• Erfahrung mit agiler Softwareentwicklung.

Was wir dir bieten

• Wettbewerbsfähiges Gehalt (abhängig von Erfahrung) – denn wir wissen, was Talent wert ist.
• Modernste Hardware: Hochleistungs-Laptop mit reichlich Speicher und Rechenleistung, sowie alle notwendigen Peripheriegeräte.
• Eine dynamische, kollaborative Arbeitsumgebung, in der deine Führungskompetenz die Zukunft des Teams mitgestaltet.
• Vielfältige Möglichkeiten zur beruflichen Weiterentwicklung und kontinuierlichem Training, um technologisch auf dem neuesten Stand zu bleiben.
• Umfassendes Krankenversicherungspaket und attraktive Zusatzleistungen.
• Vierteljährliche Team-Events für Zusammenarbeit, Innovation und Spaß!
• Ein herzliches, inklusives Arbeitsumfeld, in dem Vielfalt und Kreativität willkommen sind.

Arbeitsumgebung

Du kannst flexibel wählen, ob du in einem unserer Büros (Évora oder Lissabon) oder bequem von zu Hause aus arbeitest – viele von uns arbeiten remote. Wichtig ist: Du wirst Teil eines großartigen Teams sein, das gerne zusammenarbeitet.

Bewerbe Dich mit dem folgenden Formular