Engenheiro de Dados DATAHUB
Job Summary
No Close-up nós trabalhamos com dados informações e tecnologia para ajudar a transformar a área da saúde!
Somos uma empresa deconteúdo e serviços para a indústria farmacêuticae contribuímos para o conhecimento dastendências do mercado ajudando com eficiência e transparência a estreitar as relações entre laboratórios e profissionais médicos.
Estamos em busca de umENGENHEIRO DE DADOS - DATAHUBpara nos apoiar!
Responsibilities
- Construir manter e evoluir pipelines de ingestão e transformação de dados no Snowflake.
- Integrar dados provenientes de múltiplas fontes como:
- sistemas de CRM e ERP;
- APIs;
- planilhas e arquivos;
- serviços de armazenamento;
- bancos de dados e sistemas locais;
- processos de web scraping.
- Estruturar manter e evoluir as camadas de dados:
- RAW: armazenamento dos dados brutos conforme recebidos das fontes de origem;
- TRUSTED: dados tratados padronizados validados e submetidos a regras de qualidade;
- CURATED: dados organizados enriquecidos e disponibilizados para consumo analítico integrações e aplicações.
- Implementar mecanismos de governança qualidade segurança e rastreabilidade dos dados.
- Monitorar os processos de carga identificando falhas gargalos e oportunidades de otimização.
- Atuar na padronização e integração de dados entre os diferentes países da América Latina.
- Documentar pipelines regras de transformação integrações e modelos de dados.
- Apoiar a evolução da arquitetura de dados e das iniciativas de inteligência artificial do DataHub.
Prerequisites
Requisitos técnicos obrigatórios
- Experiência com Snowflake incluindo:
- modelagem de dados;
- ingestão e transformação de dados;
- otimização de consultas;
- monitoramento e otimização de custos.
- Experiência com Azure Data Factory.
- Conhecimento avançado em SQL.
- Experiência com processos de ETL e ELT.
- Experiência com integração de múltiplas fontes e formatos de dados.
- Experiência com desenvolvimento em Python.
- Conhecimento de práticas de DevOps e implementação de pipelines de CI/CD.
- Experiência com monitoramento tratamento de erros e observabilidade de pipelines de dados.
Conhecimentos desejáveis
- Conhecimento do Snowflake Cortex e da preparação de agentes de inteligência artificial no ambiente Snowflake.
- Conhecimento de modelos de inteligência artificial Machine Learning e Large Language Models.
- Experiência com soluções de web scraping e tratamento de alterações nas estruturas das fontes de dados.
- Conhecimento de segurança controle de acesso e governança de dados no Snowflake.
Experiences
- Assistência Médica
Comcoparticipaçãoe parceria Welhub garantindo cuidado completo para você e seus dependentes. Saúde e tranquilidade caminhando juntas.
- Assistência Odontológica
Sorriso bonito e sem surpresas: sem coparticipação para o colaborador!
- Cartão Benefícios Flex
Nosso cartão é 100% flexível: use comovale-alimentaçãoouvale-refeição do seu jeito de acordo com a sua rotina.
- Desconto Farmácia
Acesso a condições especiais e descontos em medicamentos para manter a saúde em dia.
- Seguro de Vida
Proteção e segurança para você e sua família.
- Day Off de Aniversário
O dia é seu e o presente também! Tire seu merecido descanso no seu aniversário.
- Parcerias Educacionais
Faculdades Idiomas TI e Dados. Aprender sempre faz parte do nosso pacote!
- Auxílio Crechepara filhos até 1 ano a contar da licença maternidade para as mamães;
About Company
Close-Up International é uma empresa de conteúdo e serviços para a indústria farmacêutica . Presente em mais de 20 países, nossa empresa se dedica ao desenvolvimento e comercialização de auditorias e relatórios dos mercados de prescrição e demanda. Desde a nossa fundação em 1968, cont ... View more