Deloitte SW Engineer - Experience Desarrollador Senior Spark

Diseñar, desarrollar y optimizar procesos de procesamiento distribuido de datos con Apache Spark. Implementar y mantener pipelines de datos en AWS Glue y/o Amazon EMR. Colaborar con arquitectos y analistas para soluciones escalables de alto rendimiento.

• Diseñar e implementar pipelines de datos en AWS Glue y/o EMR para procesamiento distribuido.
• Analizar y optimizar ejecuciones de Spark, interpretando queryplan y usando SparkUI.
• Asegurar la calidad del código, de las pruebas y de la documentación técnica.

• Experiencia sólida en Apache Spark (PySpark o Scala).
• Conocimiento avanzado de AWS Glue y/o Amazon EMR.
• Experiencia en ETL/ELT en entornos distribuidos y manejo de Python.