Data Engineer
Share
Job Location:
Monthly Salary:
Posted on:
13 hours ago
Vacancies:
1 Vacancy
Job Summary
Au sein de léquipe Data vous intervenez sur la conception le développement et lindustrialisation de pipelines de données batch et temps réel.
Vous contribuez à la mise en place darchitectures data modernes sur GCP ainsi quau développement de flux streaming robustes basés sur Kafka et lécosystème Java.
Data Warehouse & BigQuery
- Concevoir et maintenir des datasets dans BigQuery
- Développer des requêtes SQL optimisées (partitionnement clustering)
- Mettre en place des stratégies doptimisation des coûts et performances
- Concevoir des modèles analytiques (schéma en étoile data marts)
- Garantir la qualité et la cohérence des données
Concevoir et développer des pipelines ELT/ETL (batch & streaming)
- Modéliser les données (modèles analytiques data warehouse)
- Optimiser les requêtes et la performance des traitements
- Mettre en place des flux temps réel via Kafka / PubSub
- Participer à la définition des architectures data (scalabilité résilience)
Développement & Streaming
- Développer des services et APIs en Java (Spring Boot) et/ou Scala
- Implémenter des traitements streaming avec Kafka / Kafka Streams
- Développer et maintenir les transformations via DBT (Data Build Tool)
- Contribuer aux architectures microservices orientées data
Industrialisation & Exploitation
- Orchestrer les workflows avec Airflow / Cloud Composer
- Automatiser les déploiements via CI/CD (GitLab CI)
- Assurer le versioning avec Git
Excellente communication écrite et orale : Aptitude à produire des livrables et des reportings
de haute qualité.
Capacité de prise de recul : Aptitude à évaluer les problématiques avec objectivité et à
proposer des solutions damélioration.
Esprit déquipe : Capacité à collaborer efficacement avec les membres de léquipe po
atteindre des objectifs communs.
Maîtrise des concepts dAgilité (Scrum Sprint Planning Backlog...).
Capacité à sadapter rapidement aux nouvelles technologies et aux changements de priorités.
Qualifications :
Diplômé(e) dun Bac5 en école dingénieur ou équivalent universitaire avec une spécialisation
en informatique ou justifiant dune expérience significative équivalent
Expérience de 4 ans et plus en GCP
Remote Work :
No
Employment Type :
Full-time
Key Skills
- Apache Hive
- S3
- Hadoop
- Redshift
- Spark
- AWS
- Apache Pig
- NoSQL
- Big Data
- Data Warehouse
- Kafka
- Scala
About Company
Devoteam is a AI-driven tech consulting firm specialised in cloud platforms, cyber, data, and sustainability. Tech native for almost 30 years, Devoteam guides businesses through sustainable digital transformation to deliver value. With over 11,000 tech architects in more than 25 co ... View more
