O que buscamos:
Profissional que atue com Engenharia de Software em atuação remota.
Responsabilidades:
- Liderar a migração de bancos de dados SQL para AWS (RDS Aurora Redshift);
- Desenvolver e otimizar jobs no Trino para processamento distribuído;
- Criar e ajustar pipelines com PySpark (EMR Glue);
- Projetar arquiteturas de data lake/lakehouse (S3 Delta Lake Iceberg);
- Implementar DataOps e automação de pipelines;
- Garantir qualidade governança e segurança dos dados;
- Otimizar performance de Spark jobs (particionamento caching broadcast join);
- Mentorar engenheiros júnior e pleno compartilhando boas práticas e padrões técnicos.
Requisitos e Qualificações:
- Experiência em Engenharia de Dados;
- Sólida experiência com SQL e bancos de dados relacionais;
- Domínio em PySpark e processamento distribuído;
- Experiência comprovada com AWS (S3 Glue EMR Redshift RDS);
- Conhecimento avançado em Trino/Presto;
- Vivência com arquitetura de data lake/lakehouse;
- Proficiência em Python para manipulação e integração de dados;
- Experiência com Airflow (ou orquestradores similares);
- Conhecimento em Infraestrutura como Código (Terraform CloudFormation);
- Experiência com otimização de performance em Spark.
- Desejáveis / Diferenciais: Certificações AWS (Solutions Architect Data Analytics);
- Experiência com Delta Lake Apache Iceberg ou Hudi;
- Conhecimento em Spark Structured Streaming;
- Vivência com DBT (Data Build Tool);
- Experiência com Spark no Databricks ou AWS EMR.
Descrição comportamental:
Procuramos uma pessoa que:
- Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
- Tenha coragem para se desafiar e ir além abraçando novas oportunidades de crescimento;
- Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
- Tenha habilidades de resolução de problemas;
- Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
- Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.
Big enough to deliver small enough to care.
#VempraGFT
#VamosVoarJuntos
#ProudToBeGFT
O que buscamos:Profissional que atue com Engenharia de Software em atuação remota.Responsabilidades:Liderar a migração de bancos de dados SQL para AWS (RDS Aurora Redshift);Desenvolver e otimizar jobs no Trino para processamento distribuído;Criar e ajustar pipelines com PySpark (EMR Glue);Projetar a...
O que buscamos:
Profissional que atue com Engenharia de Software em atuação remota.
Responsabilidades:
- Liderar a migração de bancos de dados SQL para AWS (RDS Aurora Redshift);
- Desenvolver e otimizar jobs no Trino para processamento distribuído;
- Criar e ajustar pipelines com PySpark (EMR Glue);
- Projetar arquiteturas de data lake/lakehouse (S3 Delta Lake Iceberg);
- Implementar DataOps e automação de pipelines;
- Garantir qualidade governança e segurança dos dados;
- Otimizar performance de Spark jobs (particionamento caching broadcast join);
- Mentorar engenheiros júnior e pleno compartilhando boas práticas e padrões técnicos.
Requisitos e Qualificações:
- Experiência em Engenharia de Dados;
- Sólida experiência com SQL e bancos de dados relacionais;
- Domínio em PySpark e processamento distribuído;
- Experiência comprovada com AWS (S3 Glue EMR Redshift RDS);
- Conhecimento avançado em Trino/Presto;
- Vivência com arquitetura de data lake/lakehouse;
- Proficiência em Python para manipulação e integração de dados;
- Experiência com Airflow (ou orquestradores similares);
- Conhecimento em Infraestrutura como Código (Terraform CloudFormation);
- Experiência com otimização de performance em Spark.
- Desejáveis / Diferenciais: Certificações AWS (Solutions Architect Data Analytics);
- Experiência com Delta Lake Apache Iceberg ou Hudi;
- Conhecimento em Spark Structured Streaming;
- Vivência com DBT (Data Build Tool);
- Experiência com Spark no Databricks ou AWS EMR.
Descrição comportamental:
Procuramos uma pessoa que:
- Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
- Tenha coragem para se desafiar e ir além abraçando novas oportunidades de crescimento;
- Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
- Tenha habilidades de resolução de problemas;
- Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
- Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.
Big enough to deliver small enough to care.
#VempraGFT
#VamosVoarJuntos
#ProudToBeGFT
View more
View less