Tech Stack

Description

Únete a NEORIS como Data Engineer, donde construirás y optimizarás pipelines core batch y near-real-time usando Spark y Delta Lake, modelarás capas Silver/Gold, y asegurarás la confiabilidad y rendimiento de soluciones de datos a escala.

Requirements

• Profesional en Ingeniería de Sistemas o afines
• 2 a 4 años de experiencia como Data Engineer con fuerte dominio en Spark
• Experiencia sólida en PySpark o Scala, Delta Lake, SQL avanzado
• Particionado y optimización con OPTIMIZE, Z-ORDER
• Data Quality con expectations y cargas incrementales con SCD

Responsibilities

• Construir y mantener pipelines core batch y NRT
• Modelar y evolucionar capas Silver y Gold para casos de uso analíticos
• Optimizar performance y confiabilidad en workloads distribuidos
• Implementar y monitorear Data Quality mediante expectations
• Implementar cargas incrementales, gestionar SCD, normalización/denormalización