ANALISTA DE ENGENHARIA DE DADOS PL - HÃbrido
ANALISTA DE ENGENHARIA DE DADOS PL - HÃbrido
Employer Active
Job Alert
You will be updated with latest job alerts via email
Share
Job Alert
You will be updated with latest job alerts via email
Job Description
Na Inmetrics a inovao e a excelncia operam lado a lado em um ambiente de trabalho colaborativo saudvel e dinmico. Nossa cultura valoriza o aprendizado constante a transparncia na comunicao e a flexibilidade criando um espao onde cada profissional pode se desenvolver e alcanar o seu mximo potencial.
Nosso time apaixonado por tecnologia e comprometido com entregas de valor real para os nossos clientes. Nosso diferencial a eficincia digital.
Pessoas so o nosso maior ativo por isso investimos em oportunidades que vo alm de um salrio competitivo proporcionamos benefcios diferenciados em relao ao mercado e um ambiente de trabalho saudvel e reconhecido por nossos colaboradores.
#Vemparainmetrics
Responsibilities
A pessoa engenheira de dados ir trabalhar junto ao time de engenharia de Dados do time de Cartes na criao de Pipelines de Dados para ingesto e disponibilizao de dados do domnio de cartes no data Lake Corporativo do Santander Brasil. A pessoa trabalhar com um time gil em projeto estratgico da rea e deve possuir conhecimento em Databricks e PySpark.
Prerequisites
Conhecimentos Obrigatrios Habilidade em Databricks: Experincia em trabalhar com Apache Spark em Databricks incluindo a criao e otimizao de pipelines de dados. Experincia em Pyspark e Python e Kedro: Fortes habilidades de programao em Pyspark e Python e Kedro para desenvolver depurar e manter cdigos de transformao de dados. Processamento Batch e Streaming de Dados: Conhecimento em processamento de dados em lotes e em streaming (mensageria) com a capacidade de projetar implementar e manter pipelines de processamento de dados. Conhecimento em DevOps: Familiaridade com o uso do Jenkins para integrao e entrega contnua (CI/CD) alm de automao de tarefas de implantao e gerenciamento de pipelines. Git: Proficincia em Git para controle de verso de cdigo-fonte e colaborao eficaz em equipes de desenvolvimento. Mtodos geis: Compreenso dos princpios e prticas de mtodos geis como Kanban e Scrum para colaborao eficaz e gerenciamento de projetos. Orquestrao (por exemplo Control-M ou outros): Conhecimento em ferramentas de orquestrao de processos o que importante para o agendamento e controle de fluxos de trabalho. Conhecimento em Microsoft Azure: Experincia com os principais servios da Microsoft Azure para Dados incluindo o Azure Databricks Azure Data Factory e Azure StorageAccounts . Conhecimentos Desejveis Conhecimento em AWS: Experincia nos principais servios como Aurora PostgreSQL CloudWatch Lambda S3 Vivncia em Ambientes On-Premises (Cloudera): Desejvel Experincia anterior com a plataforma Cloudera ou outras solues on-premises para big data incluindo Hadoop HBase e Hive. Conhecimento em desenvolvimento orientado a objeto: Familiaridade com linguagem JAVA de bastante ajuda (no necessrio codar sim interpretar). Certificaes opcionais: Certificaes AZ-900 (Microsoft Azure Fundamentals) e DP-900 (Microsoft Azure Data Fundamentals) so preferenciais e demonstram um conhecimento slido da plataforma Azure e em dados.
Experiences
PySpark-Prtica Azure-Prtica AWS-Prtica
Employment Type
Full Time
