Engenharia de Dados Senior 128806
Share
Job Location:
Monthly Salary:
Posted on:
30+ days ago
Vacancies:
1 Vacancy
Job Summary
O que buscamos:
Profissional com sólida experiência em processamento e análise de dados em ambiente AWS com domínio em Python Spark e conceitos de Data Mesh. Pessoa com perfil analítico proativa e comprometida com entregas de qualidade capaz de atuar em ambientes complexos e com alta volumetria de dados garantindo eficiência e confiabilidade nos processos.
Responsabilidades:
- Processar e analisar dados utilizando AWS EMR com Spark;
- Utilizar AWS Glue como catálogo de dados;
- Realizar consultas em DynamoDB e Athena;
- Monitorar e identificar erros em execuções no Step Function;
- Desenvolver e manter processos em Python e Spark especialmente no framework B3;
- Orquestrar e acompanhar processos no Control-M identificando dependências melhorias e correções necessárias;
- Utilizar GitHub para versionamento de código e colaboração entre equipes;
- Apoiar na análise de processos criados em SSIS e contribuir para a migração de processos OnPrem para AWS;
- Recomendar e implementar melhorias utilizando Iceberg e arquitetura Data LakeHouse
(Spark Iceberg Dremio).
Requisitos e qualificações:
- Experiência em AWS EMR Glue (catálogo) DynamoDB/Athena e Step Function;
- Experiência sólida em Python e Spark especialmente em frameworks financeiros como B3;
- Experiência com Control-M para orquestração de processos e análise de dependências;
- Conhecimento em GitHub para versionamento e colaboração de código;
- Experiência com bancos de dados relacionais procedures e SSIS;
- Sólidos conhecimentos em Databricks.
Descrição comportamental:
Procuramos uma pessoa que:
- Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
- Tenha coragem para se desafiar e ir além abraçando novas oportunidades de crescimento;
- Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
- Tenha habilidades de resolução de problemas;
- Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
- Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.
Big enough to deliver small enough to care.
#VempraGFT
#VamosVoarJuntos
#ProudToBeGFT
Required Experience:
Senior IC
Key Skills
- Abinitio
- Cooking
- Consumer Durables
- Interior Fit-Out
- IT System Administration
- ITI
About Company
We see opportunity in technology. In domains such as cloud, AI, mainframe modernisation, DLT and IoT, we blend established practice with new thinking to help our clients stay ahead.
