Deloitte SW Engineer - Experienced Senior Spark Developer
This job was originally posted in Spanish and automatically translated to English. You'll most likely need Spanish to apply.
Job Description
Can you imagine participating in the transformation of the leading national and international organizations?
At Deloitte, we are committed to generating an impact on society, our clients, and you.
Responsibilities
- Design, develop, and optimize distributed data processing processes with Apache Spark.
- Implement and maintain data pipelines in AWS Glue and/or Amazon EMR.
- Collaborate with architects and data analysts in defining scalable, high-performance solutions.
- Analyze and interpret QueryPlan generated by Spark and use SparkUI to detect patterns, bottlenecks, and optimization opportunities.
- Ensure code quality, testing, and technical documentation.
- Identify opportunities for performance and cost improvement in cloud environments.
Requirements
- Solid experience in Apache Spark (PySpark or Scala).
- Advanced knowledge of AWS Glue and/or Amazon EMR.
- Ability to analyze and optimize Spark executions, including interpretation of QueryPlan and use of SparkUI.
- Experience in developing ETL/ELT in distributed environments.
- Proficiency in Python and programming best practices.
- Knowledge of complementary AWS services (S3, DynamoDB, Lambda, IAM, etc.).
- Experience working in agile and collaborative environments.
We also value
- AWS certifications (Data Engineer or Solutions Architect, associate or professional level).
- Experience in microservices and event-driven architectures.
- Knowledge of pipeline orchestration (Step Functions, Airflow, or others).
What is it like to work at Deloitte?
π€© High-impact projects where you will have a long journey of growth and learning
β―οΈ A hybrid-flexible daily routine: you will have flexible hours and a good balance between remote work and teamwork in our offices or those of our clients
β½ Great atmosphere inside and outside the office: you will enjoy several teambuildings per year, cultural and sporting activities... and much more!
π§βοΈ Integral well-being: take care of yourself with our physical, mental, and financial health program... and with a medical team in the offices!
π€² Social impact: You can sign up for a wide range of national and international volunteer opportunities and pro-bono projects to put your time and talent at the service of those who need it most
π£οΈCulture of feedback and continuous learning: you will grow in an inclusive environment where equal opportunity and your personalized training plan will drive your development. Can you already visualize yourself at Deloitte University in Paris?
π€ Exclusive benefits for being part of Deloitte: you can enjoy a large catalog of benefits and a complete flexible remuneration plan
If you like what you read, these are your next steps:
- Apply to the offer by clicking 'Submit application now' and complete your profile
- If you fit the position, our talent team will contact you to get to know you better
Start the process! We will guide you through the different phases until your onboarding.
View original advert (Spanish)
ΒΏTe imaginas participando en la transformaciΓ³n de las principales organizaciones nacionales e internacionales?
En Deloitte estamos comprometidos con generar un impacto en la sociedad, en nuestros clientes y en ti.
Responsabilidades
- DiseΓ±ar, desarrollar y optimizar procesos de procesamiento distribuido de datos con Apache Spark.
- Implementar y mantener pipelines de datos en AWS Glue y/o Amazon EMR.
- Colaborar con arquitectos y analistas de datos en la definiciΓ³n de soluciones escalables y de alto rendimiento.
- Analizar e interpretar los QueryPlan generados por Spark y utilizar SparkUI para detectar patrones, cuellos de botella y oportunidades de optimizaciΓ³n.
- Asegurar la calidad del cΓ³digo, las pruebas y la documentaciΓ³n tΓ©cnica.
- Identificar oportunidades de mejora en rendimiento y costes en entornos cloud.
Requisitos
- Experiencia sΓ³lida en Apache Spark (PySpark o Scala).
- Conocimiento avanzado de AWS Glue y/o Amazon EMR.
- Capacidad para analizar y optimizar ejecuciones en Spark, incluyendo interpretaciΓ³n de QueryPlan y uso de SparkUI.
- Experiencia en el desarrollo de ETL/ELT en entornos distribuidos.
- Manejo de Python y buenas prΓ‘cticas de programaciΓ³n.
- Conocimientos de servicios complementarios en AWS (S3, DynamoDB, Lambda, IAM, etc.).
- Experiencia trabajando en entornos Γ‘giles y colaborativos.
Valoramos tambiΓ©n
- Certificaciones en AWS (Data Engineer o Solutions Architect, nivel associate o prefessional).
- Experiencia en microservicios y arquitecturas basadas en eventos.
- Conocimientos en orquestaciΓ³n de pipelines (Step Functions, Airflow u otros).
ΒΏCΓ³mo es trabajar en Deloitte?
π€© Proyectos de alto impacto donde tendrΓ‘s un largo recorrido y aprendizaje
β―οΈ Un dΓa a dΓa hΓbrido-flexible: tendrΓ‘s horario flexible y un buen equilibrio entre el teletrabajo y el trabajo en equipo en nuestras oficinas o las de nuestros clientes
β½ Buen ambiente dentro y fuera de la oficina: disfrutarΓ‘s de varios teambuildings al aΓ±o, actividades culturales y deportivas... Β‘y mucho mΓ‘s!
π§βοΈ Bienestar integral: cuΓdate con nuestro programa de salud fΓsica, mental y financiera... Β‘y con equipo mΓ©dico en las oficinas!
π€² Impacto social: PodrΓ‘s apuntarte a una gran cantidad de voluntariados de alcance nacional e internacional y a proyectos pro-bono con los que poner tu tiempo y talento al servicio de quienes mΓ‘s lo necesitan
π£οΈCultura del feedback y aprendizaje continuo: crecerΓ‘s en un entorno inclusivo donde la igualdad de oportunidades y tu plan personalizado de formaciΓ³n impulsarΓ‘n tu desarrollo. ΒΏYa te visualizas en la Deloitte University de ParΓs?
π€ Beneficios exclusivos por ser parte de Deloitte: podrΓ‘s disfrutar de un gran catΓ‘logo de beneficios y de un completo plan de retribuciΓ³n flexible
Si te gusta lo que lees, estos son tus prΓ³ximos pasos:
- Aplica a la oferta haciendo clic en 'Enviar candidatura ahora' y completa tu perfil
- Si encajas en el puesto, nuestro equipo de talento te contactarΓ‘ para conocerte mejor
Β‘Comienza el proceso! Te iremos guiando por las diferentes fases hasta tu incorporaciΓ³n.