SDG Group logo

Spark Data Engineer

SDG Group·Salary not specified

Primary stack

Apache SparkPythonScalaApache BeamAirflowDatabricksDelta LakeApache IcebergAWSAzure

Nice to have's

GitKafkaDevOpsAmazon Kinesis

Job description

About the Position

En SDG Group somos líderes globales en Big Data, Business Intelligence, Analytics e Inteligencia Artificial. Desde 1994 hemos acompañado a la mitad del IBEX-35 y a algunas de las compañías más destacadas a nivel internacional en su transformación digital, convirtiendo los datos en soluciones de alto impacto gracias a nuestras alianzas estratégicas con Microsoft, Google y AWS, y a los mejores aceleradores tecnológicos del mercado.

Nuestro equipo de Data Technologies es el epicentro donde aterrizan proyectos desafiantes y las soluciones más disruptivas. Trabajamos de forma transversal con clientes de múltiples sectores, siempre a la vanguardia tecnológica, combinando innovación, expertise y autonomía real.

➡️ ¿Cómo será tu día a día?

  • Diseñarás y desarrollarás soluciones end-to-end para procesar grandes volúmenes de datos, desde el problema de negocio hasta pipelines ETL/ELT escalables y optimizados.
  • Trabajarás con tecnologías como Apache Spark, Python, Scala, Apache Beam y orquestación con Airflow o Databricks Workflows, generando insights.
  • Procesarás y almacenarás datos utilizando formatos como Parquet, Delta Lake y Apache Iceberg, garantizando eficiencia y escalabilidad en entornos cloud (AWS, Azure, GCP).
  • Definirás arquitecturas avanzadas como Data Lakehouse, Data Mesh y data warehouses mejorando la gestión y el aprovechamiento de los datos.
  • Colaborarás con equipos multidisciplinares y stakeholders, transformando requerimientos complejos en soluciones técnicas eficientes.
  • Explorarás y evaluarás tecnologías emergentes, como Databricks, Delta Live Tables, dbt Cloud, Apache Iceberg, Snowflake… contribuyendo a mantener nuestros proyectos a la vanguardia del ecosistema Big Data.
  • Impulsarás la calidad y observabilidad de los datos aplicando DataOps, Data Quality y CI/CD, asegurando pipelines confiables y seguros.

Requirements

  • Formación en Ingeniería Informática, Telecomunicaciones, matemáticas, Física, o similares.
  • Experiencia en Big Data: a partir de 6 años trabajando con procesamiento distribuido y pipelines ETL/ELT en entornos complejos, utilizando lenguajes como Python o Scala, frameworks como Apache Spark, y plataformas como Airflow, Databricks o Snowflake; conocimiento de arquitecturas de datos (Data Lakehouse, cloud) y formatos/almacenamiento como Parquet, Delta Lake, Iceberg o Hudi.
  • Buenas prácticas y gestión de código: Git, CI/CD, DataOps, monitorización de pipelines, control de calidad de datos y versionado de datos.
  • Mentalidad de innovación: Curiosidad por tecnologías emergentes y tendencias Big Data, con disposición a experimentar y proponer mejoras continuas.
  • Que puedas comunicarte en inglés para trabajar en entornos globales y colaborar con equipos internacionales.

Nice to Have

  • Experiencia en proyectos de streaming en tiempo real, utilizando tecnologías como Kafka, Kinesis, Flink o Spark Structured Streaming.
  • Conocimientos avanzados en orquestación, DevOps para datos, gobernanza, calidad y seguridad, así como experiencia con Data Mesh y arquitecturas distribuidas.
  • Experiencia en ML pipelines y MLOps integrados con Big Data, usando herramientas como MLflow, SageMaker, Vertex AI o Kubeflow.

We Offer

  • Tecnología e innovación sin límites. La tecnología y los datos son nuestra esencia. Trabajamos con lo más avanzado del mercado y te formamos para que domines las herramientas que están redefiniendo la industria. Tendrás acceso a las últimas plataformas y tecnologías: si algo es nuevo, lo estamos usando o evaluando.
  • Desarrollo profesional a tu medida. Aquí no hay carreras rígidas ni caminos predefinidos: cada cierto tiempo se revisan tus logros y se definen nuevos objetivos. Podrás evolucionar hacia roles de arquitectura, tech lead, referente tecnológico o especialista en dominios complejos, manteniendo siempre un impacto directo en la tecnología y en las decisiones clave de los proyectos.
  • Un equipo que te acompaña desde el primer día. Desde el minuto 1 formas parte del equipo de Data Technologies, formado por numerosos referentes donde la colaboración es el pilar fundamental.
  • Propósito y valores que nos definen. Creemos firmemente en la diversidad y la inclusión como motores esenciales de la creatividad y la innovación. Es lo que nos permite superar cualquier desafío y construir un entorno donde cada perspectiva enriquece el resultado final. 🌍💜
  • Posición estable y con gran proyección profesional, formando parte de un equipo que está creciendo progresivamente.
  • Flexibilidad total. Contamos con un modelo de trabajo adaptable, con opción 100% remota o híbrida, orientado a facilitar el equilibrio entre la vida profesional y personal.
  • Jornada intensiva en julio y agosto, además de los viernes.
  • Salarios según tu formación y experiencia, con revisiones basadas en resultados.
  • Apoyo económico para el teletrabajo.
  • Acceso a formaciones, certificaciones oficiales, conferencias y cursos.

About the Company

SDG Group is a global consulting firm specialized in Data & Analytics.

We are catalysts of innovation. We combine our unique approach to business challenges with the synergies and reach of a truly global firm. This is SDG Group, where the AI-driven futures we build with our clients are backed by three decades of experience in data, analytics, and business insights.

SDG Group works on the pillars of a Triple Expertise, incorporating business process skills by domain with a technological knowledge and a partnership with the most important and innovative software providers. Our portfolio also features cutting-edge laboratories and the development of Advanced Analytics & AI technologies.

🔝 OUR MARKET POSITION: SDG Group has a market leader position both at a global and a local level, recognised by the main market analysts in the AI, Data & Analytics space.

👨🏻‍💻 +2,500 EMPLOYEES: Driven by talent and innovation. We are constantly growing by attracting and retaining the best talents from the market.

🌍 GLOBAL PRESENCE: Customer proximity is our purpose. Since November 2020 SDG joined Alten Group.

🤩 +185M VOLUME OF ACTIVITY: A growth mind-set to keep moving forward.

🤝 +700 CUSTOMER BASE: Our customer at the center. We serve an ever-increasing number of clients around the world.

Copyright © 2026 P.I. 13060250159

All rights reserved. SDG Group refers to the SDG network and/or one or more of its member firms, each of which is a separate legal entity.

Founded in 1994

© SDG Group. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.

More at SDG Group

All 235 roles

Popular searches