Data Engineer PL 135468 INT
Job Summary
O que buscamos:
Profissional pleno com experiência em engenharia de dados focado(a) no desenvolvimento e manutenção de pipelines de dados garantindo a qualidade governança e performance. Buscamos alguém com forte capacidade de colaboração para traduzir necessidades de negócio em soluções técnicas eficientes.
Responsabilidades:
Projetar esquemas eficientes para consultas analíticas manter a performance e garantir a integridade dos dados;
Garantir a governança e conformidade dos dados aderindo a regulamentações e padrões relevantes;
Implementar frameworks de governança de dados para manter a qualidade integridade e segurança dos dados;
Compreender e abordar as necessidades de negócio colaborando com stakeholders para coletar requisitos e traduzi-los em soluções técnicas;
Otimizar pipelines de dados para relatórios mais rápidos e integrar dados de diversas fontes para fornecer insights abrangentes que apoiem os processos de tomada de decisão;
Integrar com múltiplos serviços e APIs;
Requisitos e Qualificações:
Inglês avançado
Python: Forte compreensão da linguagem e sua aplicabilidade em ferramentas de dados incluindo bibliotecas como pandas e relacionadas
Airflow: Criação de DAGs manutenção de workflows integração com dbt-core
DBT: Desenvolvimento e manutenção de modelos e macros em dbt-core (não dbt Cloud); Experiência na migração de código SQL para dbt
Git: Estrutura de deployment em camadas alinhada com a equipe de Infraestrutura
SQL Server: Conhecimento avançado incluindo tuning avaliação de performance e otimização
Arquitetura Medallion: Compreensão das operações da arquitetura Medallion (familiaridade operacional)
Required Experience:
IC
About Company
We see opportunity in technology. In domains such as cloud, AI, mainframe modernisation, DLT and IoT, we blend established practice with new thinking to help our clients stay ahead.