Senior Data Engineering Specialist | Spécialiste senior en Ingénierie de Données

Your role as Senior Engineering Specialist :

As a key member of our data engineering team the ideal candidate will possess a profound knowledge in data processing frameworks and analytics with extensive experience in Python Airflow Apache Beam DBT GCP Dataflow and GCP BigQuery. You will play a crucial role in designing and implementing sophisticated data pipelines overseeing data architecture and guiding the team towards achieving optimal data processing and analytics solutions.

What were looking for:
Bachelors or masters degree in computer science Engineering or related field.
5 years of experience in a Data Engineering role with a focus on leadership and project management.
Excellent project management and organizational skills.
Robust analytical skills for working with unstructured datasets and complex data systems.
Exceptional communication skills to clearly convey technical concepts to a broad range of stakeholders.
Strong leadership presence with a sense of ownership and accountability able to independently drive projects while contributing to team success.
Experience in leading and supporting cross-functional teams in a dynamic environment.
Advanced SQL knowledge and experience with relational databases and familiarity with various databases.
Demonstrated expertise in building and optimizing large-scale data pipelines architectures and datasets.
Knowledge of message queuing stream processing and highly scalable big data storage solutions.
Experience with big data tools like Hadoop Spark Kafka etc. is highly regarded.
Proficiency in data pipeline and workflow management tools such as Airflow and Luigi.
Deep experience with GCP cloud services including Dataflow BigQuery and PubSub.
Familiarity with stream-processing systems like Storm and Spark-Streaming is advantageous.

What youll be doing :

• Lead the design construction testing and maintenance of highly scalable and robust data pipeline architectures for both batch and real-time data processing.
• Lead the strategic planning of data architectures pipeline designs and data modeling to support business initiatives and ensure compliance with data governance and security policies.
• Mentor junior data engineers fostering a culture of technical excellence innovation and continuous improvement.
• Collaborate with data architects business stakeholders and IT teams to understand data needs implement data strategies and ensure seamless data integration across the organization.
• Spearhead the evaluation implementation and management of new technologies and tools to enhance the capabilities of the data infrastructure.
• Architect and maintain sophisticated data pipelines optimizing data extraction transformation with DBT and loading into SQL Python and GCP BigQuery environments.
• Optimize data flows and architecture to improve data quality efficiency and reliability across complex and diverse data systems.
• Lead the development of complex data processing tasks using Apache Beam and GCP Dataflow for real-time analytics and insights.
• Utilize DBT to manage data transformation workflows ensuring accuracy and consistency in GCP BigQuery.
• Develop and maintain scalable and automated data pipelines incorporating advanced data quality checks and monitoring to minimize data discrepancies and errors.
• Drive innovation by exploring new data technologies and software engineering practices to enhance the agility and capability of the data engineering team.
• Act as a thought leader in data engineering staying ahead of industry trends and integrating new technologies and approaches to evolve our data infrastructure.

This role requires strong English skills to interact with global colleagues outside Quebec. Proficiency in both spoken and written English is essential.

We are proud to offer bilingual job opportunities to all qualified candidates. Our job descriptions are written in both French and English to welcome French- and English-speaking talents. We encourage applications from all qualified individuals and are committed to an inclusive work environment that respects diversity.

(Version française)

WorkJam est le chef de file mondial du travail numérique de première ligne connectant lensemble de la main-dœuvre sur le terrain pour travailler en parfaite harmonie. WorkJam résout les problèmes les plus courants rencontrés par les entreprises de première ligne globales grâce à des outils de planification de gestion des tâches de communication et dapprentissage - le tout dans une seule application !

Nous sommes fiers de nos équipes dévouées qui font une différence pour des millions demployés de première ligne ce qui nous a permis dêtre reconnus comme lauréat du prix pour linnovation dans la gestion de la main-dœuvre 2024 World Future Award parmi dautres distinctions.

Avantages de rejoindre WorkJam :
Salaire et avantages sociaux compétitifs
4 semaines de vacances plus congés personnels
Cotisation à votre régime de retraite/pension
Un environnement de travail flexible pour favoriser un équilibre entre vie professionnelle et vie privée
Généreuse prime de 4 000 $ pour la recommandation demployés

Chez WorkJam nos valeurs fondamentales sont aller de lavant faire une différence lunification le respect et linclusion. WorkJam est une entreprise internationale à forte croissance avec des opérations en Amérique du Nord en Europe et en Australie avec notre siège social basé à Montréal. En savoir plus sur

Votre role en tant que Spécialiste en ingénierie de données :

En tant que membre de léquipe dintelligence daffaires la personne idéale possède une solide expertise en traitement de données et en analytique et maîtrise Python Airflow Apache Beam DBT GCP Dataflow et GCP BigQuery. Elle jouera un rôle déterminant dans la conception et la mise en œuvre de pipelines de données sophistiqués la supervision de larchitecture de données et lorientation de léquipe vers des solutions optimales danalytique.

Ce que nous recherchons :

• Baccalauréat ou maîtrise en informatique en génie ou dans un domaine connexe.
• 5 ans ou plus dexpérience en ingénierie des données avec un accent sur le leadership et la gestion de projets.
• Excellentes aptitudes en gestion de projets et en organisation.
• Solides compétences analytiques pour travailler avec des jeux de données non structurées et des systèmes de données complexes.
• Aptitudes exceptionnelles en communication permettant de vulgariser des concepts techniques auprès de divers intervenants.
• Leadership affirmé sens des responsabilités et capacité à mener des projets de façon autonome tout en contribuant au succès de léquipe.
• Expérience dans la direction et le soutien déquipes interfonctionnelles dans un environnement dynamique.
• Excellente maîtrise de SQL et expérience avec les bases de données relationnelles et variées.
• Expertise démontrée dans la conception et loptimisation de pipelines de données darchitectures et de jeux de données à grande échelle.
• Connaissance des systèmes de messagerie du traitement en continu et des solutions de stockage massif de données.
• Expérience avec les outils big data comme Hadoop Spark et Kafka (un atout).
• Maîtrise des outils de gestion de pipelines et de flux de travail tels quAirflow et Luigi.
• Expérience approfondie des services GCP notamment Dataflow BigQuery et PubSub.
• Familiarité avec les systèmes de traitement en continu tels que Storm et Spark-Streaming (un atout).

Ce que vous ferez :

• Diriger la conception la construction les tests et la maintenance darchitectures de pipelines de données hautement scalables adaptées au traitement par lots et en temps réel.
• Piloter la planification stratégique des architectures de données des designs de pipelines et de la modélisation en soutien aux initiatives daffaires et en conformité avec les politiques de gouvernance et de sécurité.
• Mentorer les ingénieures de données juniors et cultiver une culture dexcellence technique dinnovation et damélioration continue.
• Collaborer avec les architectes de données les parties prenantes et les équipes TI pour comprendre les besoins en données mettre en œuvre des stratégies et assurer une intégration fluide des données.
• Prendre en charge lévaluation limplémentation et la gestion de nouvelles technologies pour renforcer linfrastructure de données.
• Concevoir et maintenir des pipelines de données sophistiqués optimisant lextraction la transformation avec DBT et le chargement dans des environnements SQL Python et GCP BigQuery.
• Optimiser les flux et larchitecture de données afin daméliorer la qualité lefficacité et la fiabilité des données dans des systèmes complexes.
• Piloter le développement de tâches complexes de traitement de données avec Apache Beam et GCP Dataflow pour lanalytique en temps réel.
• Utiliser DBT pour gérer les flux de transformation de données en garantissant lexactitude et la cohérence dans GCP BigQuery.
• Développer et maintenir des pipelines automatiques intégrant des contrôles avancés de qualité et des systèmes de surveillance pour minimiser les erreurs et les incohérences.
• Favoriser linnovation en explorant de nouvelles technologies de données et pratiques de génie logiciel pour accroître lagilité de léquipe.
• Être une leader dopinion en ingénierie des données en restant à la pointe des tendances de lindustrie et en intégrant de nouvelles technologies pour faire évoluer notre infrastructure.