Deloitte SW Engineer - Experience Desarrollador Senior Spark

Buscamos un Ingeniero de Software Senior enfocado en Spark para diseñar, desarrollar y optimizar procesos de procesamiento distribuido de datos. Implementar pipelines en AWS y colaborar con arquitectos de datos para soluciones escalables y de alto rendimiento.

• Diseñar, desarrollar y optimizar procesos de procesamiento distribuido de datos con Apache Spark.
• Implementar y mantener pipelines de datos en AWS Glue y/o Amazon EMR.
• Analizar e interpretar los query plans de Spark y usar SparkUI para detectar cuellos de botella y oportunidades de optimización.

• Experiencia sólida en Apache Spark (PySpark o Scala).
• Conocimiento avanzado de AWS Glue y/o Amazon EMR.
• Capacidad para analizar y optimizar ejecuciones en Spark, incluyendo interpretación de queryplan y uso de SparkUI.