Azure Databricks Engineer

Buscamos incorporar a una persona con una base técnica sólida y con ganas de trabajar en un equipo de nueva creación que se va a encargar de crear un nuevo producto software para un importante cliente internacional. Será responsable del diseño la creación y la operación de la plataforma de datos en Azure Databricks garantizando una ingesta y transformación seguras fiables y de alto rendimiento.

Lo que harás en el día a día

• Diseñar y desarrollar canalizaciones y transformaciones de datos escalables en Azure Databricks.
• Implementar controles técnicos de calidad de datos y garantizar la fiabilidad y la observabilidad del procesamiento de datos.
• Garantizar la seguridad de la plataforma E2E incluyendo la gestión de identidades el control de acceso y la protección de datos.
• Gestionar las implementaciones de cargas de trabajo de datos mediante CI/CD.
• Apoyar la integración con los sistemas de origen y los consumidores analíticos y contribuir a la preparación para las pruebas y la implementación.

Qualifications :

La persona candidata debe saber trabajar con las siguientes tecnologías:

• Azure Data Lake
  • Crear un Data Lake desde cero.
  • Montar carpetas/capas RAW BRONZE SILVER GOLD.
  • Configurar accesos (permisos roles claves).
  • Entender cómo funciona Delta Lake y el versionado.
  • Gestionar historificación (snapshots / timetravel).
  • Optimizar almacenamiento y particionado.
• Azure Data Factory
  • Crear pipelines para traer datos desde SAP P6 Excel APIs SFTP
  • Parametrizar pipelines (variables plantillas loops).
  • Manejar triggers: por hora día semana.
  • Gestionar errores logs y reintentos.
  • Conectar ADF con Key Vault para usar contraseñas seguras.
  • Orquestar cargas y dejarlo todo automatizado.
• Databricks
  • Programar en Python y/o SQL sobre Spark.
  • Crear notebooks BRONZE SILVER GOLD.
  • Limpiar datos transformar unir fuentes.
  • Implementar reglas de negocio simples (si EXW < PU error).
  • Entender cómo se versiona con Delta Lake.
  • Configurar clusters y ejecutar jobs.
• Interconexión entre servicios de Azure: ADF Databricks SQL
• Configuración y funcionamiento de la seguridad Azure.

Además será valorable:

• Nivel medio-alto de inglés (B2-C1)
• Kafka/Spark Streaming
• Azure ML
   

Información adicional :

Qué te ofrecemos

• Programa de formación por parte de la empresa para que puedas seguir desarrollándote y promocionar dentro del plan de carrera que existe para ti.
• Contrato indefinido y estabilidad.
• Retribución flexible y más beneficios
• Flexibilidad horaria.
• Modalidad de teletrabajo híbrida aunque para esta posición es posible teletrabajo 100%
• Todos los viernes en jornada intensiva!
• Jornada intensiva en verano!
• Te ofrecemos un entorno dinámico en el que tu plan de carrera y crecimiento será nuestro objetivo.
• Buen ambiente de trabajo abiertos e inclusivos.
• Formarás parte de un gran equipo de profesionales con inquietud y motivación por la tecnología.

Estas preparado para afrontar nuevos retos y seguir desarrollando tu carrera profesional

Apúntate a la oferta esta puede ser la oportunidad que estabas esperando!

Remote Work :

No

Employment Type :

Full-time