Engenheiro de Dados Certificado Databricks Certified Data Engineer Professional

Dadoteca

Not Interested
Bookmark
Report This Job

profile Job Location:

Rio de Janeiro - Brazil

profile Monthly Salary: Not Disclosed
Posted on: 16 days ago
Vacancies: 1 Vacancy

Job Summary

Resumo da Posição

Buscamos um(a) Engenheiro(a) de Dados com certificação obrigatória Databricks Certified Data Engineer Professional para atuar no desenvolvimento de soluções de dados em Azure e Databricks. Este profissional será responsável por projetar implementar e otimizar pipelines de dados escaláveis e de alta performance assegurando governança qualidade e disponibilidade das informações para análises avançadas e tomadas de decisão estratégicas.

Principais Atividades

  • Projetar desenvolver e manter pipelines de dados em Azure e Databricks com foco em performance escalabilidade e confiabilidade.

  • Implementar e gerenciar processos ETL/ELT utilizando Azure Data Factory Databricks e Synapse Analytics.

  • Otimizar modelos de dados e fluxos de processamento para suportar análises complexas e relatórios corporativos.

  • Monitorar e resolver gargalos de performance garantindo alta disponibilidade e eficiência operacional.

  • Integrar e transformar dados de múltiplas fontes garantindo qualidade e rastreabilidade via Unity Catalog.

  • Colaborar com times de BI Analytics e Desenvolvimento traduzindo necessidades de negócio em soluções técnicas de dados.

  • Documentar arquiteturas pipelines e boas práticas propondo melhorias contínuas e inovações tecnológicas.

Requisitos

  • Graduação em Engenharia de Dados Ciência da Computação Sistemas de Informação Matemática ou áreas correlatas.

  • Certificação obrigatória: Databricks Certified Data Engineer Professional.

  • Experiência comprovada em engenharia de dados e manutenção de pipelines ETL/ELT.

  • Domínio do ecossistema Azure: Data Factory Databricks Synapse Analytics Data Lake Event Hub/Service Bus e Microsoft Fabric.

  • Conhecimentos avançados em Spark (PySpark ou Scala) e SQL.

  • Experiência com bancos de dados relacionais e não relacionais (SQL Server PostgreSQL CosmosDB).

  • Proficiência em Python para manipulação integração e automação de dados.

  • Vivência com versionamento (Git) e integração/entrega contínua (CI/CD).

  • Experiência com Unity Catalog e Delta Lake.

Competências

  • Capacidade analítica e técnica para lidar com grandes volumes de dados e arquiteturas distribuídas.

  • Criação e manutenção de catálogos de dados corporativos no Unity Catalog.

  • Proatividade na resolução de problemas complexos com soluções escaláveis e sustentáveis.

  • Boa comunicação e colaboração com equipes multidisciplinares.

  • Organização atenção a detalhes e foco em resultados.

Diferenciais

  • Certificações adicionais Microsoft (ex.: Azure Data Engineer Associate).

  • Experiência em arquiteturas modernas de dados (Lakehouse Data Mesh Delta Sharing).

  • Conhecimento em Power BI para validação de modelos e KPIs.

  • Vivência em projetos de engenharia de dados corporativos de grande porte.

Resumo da PosiçãoBuscamos um(a) Engenheiro(a) de Dados com certificação obrigatória Databricks Certified Data Engineer Professional para atuar no desenvolvimento de soluções de dados em Azure e Databricks. Este profissional será responsável por projetar implementar e otimizar pipelines de dados esca...
View more view more

Key Skills

  • Apache Hive
  • S3
  • Hadoop
  • Redshift
  • Spark
  • AWS
  • Apache Pig
  • NoSQL
  • Big Data
  • Data Warehouse
  • Kafka
  • Scala