Deloitte SW Engineer - Experienced Senior Spark Developer

Deloitte
Deloitte
Madrid, SpainOn-siteCompetitiveAdded 1 month agoInternship
🇪🇸 Translated from Spanish

This job was originally posted in Spanish and automatically translated to English. You'll most likely need Spanish to apply.

Job Description


Can you imagine participating in the transformation of the leading national and international organizations?

At Deloitte, we are committed to generating an impact on society, our clients, and you.

Responsibilities

  • Design, develop, and optimize distributed data processing processes with Apache Spark.
  • Implement and maintain data pipelines in AWS Glue and/or Amazon EMR.
  • Collaborate with architects and data analysts in defining scalable and high-performance solutions.
  • Analyze and interpret the QueryPlan generated by Spark and use SparkUI to detect patterns, bottlenecks, and optimization opportunities.
  • Ensure code quality, testing, and technical documentation.
  • Identify opportunities for performance and cost improvement in cloud environments.

Requirements

  • Solid experience in Apache Spark (PySpark or Scala).
  • Advanced knowledge of AWS Glue and/or Amazon EMR.
  • Ability to analyze and optimize Spark executions, including interpretation of QueryPlan and use of SparkUI.
  • Experience in the development of ETL/ELT in distributed environments.
  • Proficiency in Python and programming best practices.
  • Knowledge of complementary AWS services (S3, DynamoDB, Lambda, IAM, etc.).
  • Experience working in agile and collaborative environments.

We also value

  • AWS certifications (Data Engineer or Solutions Architect, associate or professional level).
  • Experience in microservices and event-driven architectures.
  • Knowledge of pipeline orchestration (Step Functions, Airflow, or others).

What is it like to work at Deloitte?

🤩 High-impact projects where you will have a long journey and learning experience

☯️ A hybrid-flexible daily routine: you will have flexible hours and a good balance between remote work and teamwork in our offices or those of our clients

Great atmosphere inside and outside the office: you will enjoy several teambuildings a year, cultural and sporting activities... and much more!

🧘♀️ Integral wellbeing: take care of yourself with our physical, mental, and financial health program... and with a medical team in the offices!

🤲 Social impact: You can sign up for a large number of national and international volunteer opportunities and pro-bono projects to put your time and talent at the service of those who need it most

🗣️Culture of feedback and continuous learning: you will grow in an inclusive environment where equal opportunities and your personalized training plan will drive your development. Can you already visualize yourself at Deloitte University in Paris?

🤝 Exclusive benefits for being part of Deloitte: you can enjoy a great catalog of benefits and a complete flexible remuneration plan

If you like what you read, these are your next steps:

  • Apply to the offer by clicking 'Submit application now' and complete your profile
  • If you fit the position, our talent team will contact you to get to know you better

Start the process! We will guide you through the different phases until your onboarding.


View original advert (Spanish)


¿Te imaginas participando en la transformación de las principales organizaciones nacionales e internacionales?

En Deloitte estamos comprometidos con generar un impacto en la sociedad, en nuestros clientes y en ti.

Responsabilidades

  • Diseñar, desarrollar y optimizar procesos de procesamiento distribuido de datos con Apache Spark.
  • Implementar y mantener pipelines de datos en AWS Glue y/o Amazon EMR.
  • Colaborar con arquitectos y analistas de datos en la definición de soluciones escalables y de alto rendimiento.
  • Analizar e interpretar los QueryPlan generados por Spark y utilizar SparkUI para detectar patrones, cuellos de botella y oportunidades de optimización.
  • Asegurar la calidad del código, las pruebas y la documentación técnica.
  • Identificar oportunidades de mejora en rendimiento y costes en entornos cloud.

Requisitos

  • Experiencia sólida en Apache Spark (PySpark o Scala).
  • Conocimiento avanzado de AWS Glue y/o Amazon EMR.
  • Capacidad para analizar y optimizar ejecuciones en Spark, incluyendo interpretación de QueryPlan y uso de SparkUI.
  • Experiencia en el desarrollo de ETL/ELT en entornos distribuidos.
  • Manejo de Python y buenas prácticas de programación.
  • Conocimientos de servicios complementarios en AWS (S3, DynamoDB, Lambda, IAM, etc.).
  • Experiencia trabajando en entornos ágiles y colaborativos.

Valoramos también

  • Certificaciones en AWS (Data Engineer o Solutions Architect, nivel associate o prefessional).
  • Experiencia en microservicios y arquitecturas basadas en eventos.
  • Conocimientos en orquestación de pipelines (Step Functions, Airflow u otros).

¿Cómo es trabajar en Deloitte?

🤩 Proyectos de alto impacto donde tendrás un largo recorrido y aprendizaje

☯️ Un día a día híbrido-flexible: tendrás horario flexible y un buen equilibrio entre el teletrabajo y el trabajo en equipo en nuestras oficinas o las de nuestros clientes

Buen ambiente dentro y fuera de la oficina: disfrutarás de varios teambuildings al año, actividades culturales y deportivas... ¡y mucho más!

🧘♀️ Bienestar integral: cuídate con nuestro programa de salud física, mental y financiera... ¡y con equipo médico en las oficinas!

🤲 Impacto social: Podrás apuntarte a una gran cantidad de voluntariados de alcance nacional e internacional y a proyectos pro-bono con los que poner tu tiempo y talento al servicio de quienes más lo necesitan

🗣️Cultura del feedback y aprendizaje continuo: crecerás en un entorno inclusivo donde la igualdad de oportunidades y tu plan personalizado de formación impulsarán tu desarrollo. ¿Ya te visualizas en la Deloitte University de París?

🤝 Beneficios exclusivos por ser parte de Deloitte: podrás disfrutar de un gran catálogo de beneficios y de un completo plan de retribución flexible

Si te gusta lo que lees, estos son tus próximos pasos:

  • Aplica a la oferta haciendo clic en 'Enviar candidatura ahora' y completa tu perfil
  • Si encajas en el puesto, nuestro equipo de talento te contactará para conocerte mejor

¡Comienza el proceso! Te iremos guiando por las diferentes fases hasta tu incorporación.


Need a visa? No sponsorship mentioned here. Browse visa jobs