Senior Data Engineer
Share
Job Location:
Monthly Salary:
Posted on:
14 hours ago
Vacancies:
1 Vacancy
Job Summary
This is a remote position.
Senior Data Engineer (m/w/d)
Finanz- & IT-Dienstleistungsumfeld Remote Deutschland
Für ein anspruchsvolles Projekt im Finanz- und IT-Dienstleistungsumfeld suchen wir einen erfahrenen Senior Data Engineer (m/w/d) auf Consultant-Level zur Unterstützung eines modernen datengetriebenen Architekturvorhabens.
Projektumfeld
Im Fokus steht der Aufbau und die Weiterentwicklung einer skalierbaren Datenplattform unter Berücksichtigung moderner Architekturprinzipien wie Data Mesh. Sie arbeiten in einem agilen technisch anspruchsvollen Umfeld mit hoher Eigenverantwortung und engem Austausch mit Architektur- und Entwicklungsteams.
Aufgabenbereich
Design und Weiterentwicklung moderner Datenarchitekturen im Sinne von Data Mesh
Entwicklung und Optimierung performanter Datenpipelines mit Spark
Implementierung von Datenverarbeitungsprozessen mit Python und/oder Java
Orchestrierung von Workflows mit Airflow
Zusammenarbeit mit Architektur- DevOps- und Fachbereichen
Sicherstellung von Skalierbarkeit Wartbarkeit und Performance der Plattform
Requirements
Fachliche Anforderungen
Must-have
Mehrjährige Erfahrung als Data Engineer
Fundiertes konzeptionelles Wissen zu Data Mesh
Sehr gute Kenntnisse in Apache Spark
Praxiserfahrung mit Python und/oder Java
Erfahrung mit Apache Airflow
Sehr gute Deutschkenntnisse (C1/C2)
Weitere relevante technische Skills
Kubernetes bzw. OpenShift
Git
S3 / Delta Lake
YAML
SQL
Nice to have
Erfahrung mit Databricks
Kenntnisse in ArgoCD
Erfahrung mit HashiCorp Vault
Tools & Arbeitsumfeld
Bitbucket
Confluence
Jira
CI/CD-Umfeld mit GitOps-Ansätzen
Persönliche Anforderungen
Senior-Level Mindset mit hoher Eigenverantwortung
Strukturierte lösungsorientierte Arbeitsweise
Ausgeprägtes Architektur- und Plattformverständnis
Kommunikationsstärke im deutschsprachigen Projektumfeld
Teamfähigkeit in agilen Strukturen
Reisebereitschaft für gelegentliche Termine (Reisekosten separat erstattet)
Fließend Deutsch
Benefits
Company Industry
IT Services and IT Consulting
Key Skills
- Apache Hive
- S3
- Hadoop
- Redshift
- Spark
- AWS
- Apache Pig
- NoSQL
- Big Data
- Data Warehouse
- Kafka
- Scala
