Deloitte SW Engineer - Experience Senior Spark Developer
Bilbao, Spain·Competitive·Hybrid·Senior·Spanish: Native
Need a visa?No sponsorship mentioned here. Browse visa jobs.
About the role
Imagine yourself participating in the transformation of the leading national and international organizations?
At Deloitte, we are committed to making an impact on society, our clients, and you.
What you'll do
Responsibilities
- Design, develop and optimize distributed data processing with Apache Spark.
- Implement and maintain data pipelines in AWS Glue and/or Amazon EMR.
- Collaborate with data architects and analysts to define scalable, high-performance solutions.
- Analyze and interpret the QueryPlans generated by Spark and use the SparkUI to detect bottlenecks and optimization opportunities.
- Ensure code quality, testing, and technical documentation.
- Identify opportunities for performance and cost improvement in cloud environments.
What we're looking for
Requirements
- Solid experience with Apache Spark (PySpark or Scala).
- Advanced knowledge of AWS Glue and/or Amazon EMR.
- Ability to analyze and optimize Spark executions, including interpreting QueryPlans and using SparkUI.
- Experience developing ETL/ELT in distributed environments.
- Proficiency in Python and good programming practices.
- Knowledge of complementary AWS services (S3, DynamoDB, Lambda, IAM, etc.).
- Experience working in agile and collaborative environments.
Nice to have
We also value
- AWS certifications (Data Engineer or Solutions Architect, associate or professional level).
- Experience with microservices and event-driven architectures.
- Knowledge of pipeline orchestration (Step Functions, Airflow, or others).
Hiring process
If you like what you read, these are your next steps:
- Apply to the offer by clicking on 'Send application now' and complete your profile
- If you fit the position, our talent team will contact you to get to know you better
Start the process! We will guide you through the different phases until your incorporation.
Additional information
What is it like to work at Deloitte?
🤩 High-impact projects where you will have a long career and learning path
☯️ Hybrid-flexible day-to-day: you will have flexible hours and a good balance between remote work and teamwork in our offices or those of our clients
⚽ Good atmosphere inside and outside the office: you will enjoy several team-building activities per year, cultural and sports activities... and much more!
🧘♀️ Comprehensive well-being: take care of yourself with our physical, mental, and financial health program... and with a medical team in the offices!
🤲 Social impact: You can sign up for a large number of national and international volunteering opportunities and pro-bono projects to put your time and talent at the service of those who need it most
🗣️Feedback and continuous learning culture: you will grow in an inclusive environment where equal opportunities and your personalized training plan will boost your development. Can you already see yourself at the Deloitte University in Paris?
🤝 Exclusive benefits for being part of Deloitte: you will be able to enjoy a wide catalog of benefits and a comprehensive flexible compensation plan
About the role
¿Te imaginas participando en la transformación de las principales organizaciones nacionales e internacionales?
En Deloitte estamos comprometidos con generar un impacto en la sociedad, en nuestros clientes y en ti.
What you'll do
Responsabilidades
- Diseñar, desarrollar y optimizar procesos de procesamiento distribuido de datos con Apache Spark.
- Implementar y mantener pipelines de datos en AWS Glue y/o Amazon EMR.
- Colaborar con arquitectos y analistas de datos en la definición de soluciones escalables y de alto rendimiento.
- Analizar e interpretar los QueryPlan generados por Spark y utilizar SparkUI para detectar patrones, cuellos de botella y oportunidades de optimización.
- Asegurar la calidad del código, las pruebas y la documentación técnica.
- Identificar oportunidades de mejora en rendimiento y costes en entornos cloud.
What we're looking for
Requisitos
- Experiencia sólida en Apache Spark (PySpark o Scala).
- Conocimiento avanzado de AWS Glue y/o Amazon EMR.
- Capacidad para analizar y optimizar ejecuciones en Spark, incluyendo interpretación de QueryPlan y uso de SparkUI.
- Experiencia en el desarrollo de ETL/ELT en entornos distribuidos.
- Manejo de Python y buenas prácticas de programación.
- Conocimientos de servicios complementarios en AWS (S3, DynamoDB, Lambda, IAM, etc.).
- Experiencia trabajando en entornos ágiles y colaborativos.
Nice to have
Valoramos también
- Certificaciones en AWS (Data Engineer o Solutions Architect, nivel associate o prefessional).
- Experiencia en microservicios y arquitecturas basadas en eventos.
- Conocimientos en orquestación de pipelines (Step Functions, Airflow u otros).
Hiring process
Si te gusta lo que lees, estos son tus próximos pasos:
- Aplica a la oferta haciendo clic en 'Enviar candidatura ahora' y completa tu perfil
- Si encajas en el puesto, nuestro equipo de talento te contactará para conocerte mejor
¡Comienza el proceso! Te iremos guiando por las diferentes fases hasta tu incorporación.
Additional information
¿Cómo es trabajar en Deloitte?
🤩 Proyectos de alto impacto donde tendrás un largo recorrido y aprendizaje
☯️ Un día a día híbrido-flexible: tendrás horario flexible y un buen equilibrio entre el teletrabajo y el trabajo en equipo en nuestras oficinas o las de nuestros clientes
⚽ Buen ambiente dentro y fuera de la oficina: disfrutarás de varios teambuildings al año, actividades culturales y deportivas... ¡y mucho más!
🧘♀️ Bienestar integral: cuídate con nuestro programa de salud física, mental y financiera... ¡y con equipo médico en las oficinas!
🤲 Impacto social: Podrás apuntarte a una gran cantidad de voluntariados de alcance nacional e internacional y a proyectos pro-bono con los que poner tu tiempo y talento al servicio de quienes más lo necesitan
🗣️Cultura del feedback y aprendizaje continuo: crecerás en un entorno inclusivo donde la igualdad de oportunidades y tu plan personalizado de formación impulsarán tu desarrollo. ¿Ya te visualizas en la Deloitte University de París?
🤝 Beneficios exclusivos por ser parte de Deloitte: podrás disfrutar de un gran catálogo de beneficios y de un completo plan de retribución flexible
You'll most likely need Spanish to apply.This job was automatically translated to English, .
About the company
Deloitte
Consulting