Senior Data Engineer (Databricks & PySpark)

About the Position

En SDG Group llevamos más de 30 años convirtiendo datos en impacto real. Somos una consultora global 100% especializada en Data, Analytics e Inteligencia Artificial, referente del sector según Gartner, Penteo y Everest Group.

Si quieres crecer en el mundo del dato, este es el lugar.

¿Cómo será tu día a día?

• Desarrollarás pipelines de datos end-to-end con Python y PySpark, desde la ingesta hasta su procesamiento en entornos Big Data.
• Trabajarás con Databricks en la construcción y optimización de procesos de transformación de datos.
• Participarás en el diseño de arquitecturas y soluciones de datos, colaborando con perfiles más senior.
• Implementarás modelos de datos y transformaciones sobre Data Lakes, asegurando eficiencia y escalabilidad.
• Colaborarás en la definición de requerimientos técnicos para pipelines y procesos de datos.
• Probarás y aplicarás nuevas tecnologías del ecosistema Big Data y cloud en proyectos reales.

Responsibilities

• Desarrollar pipelines de datos end-to-end con Python y PySpark.
• Trabajar con Databricks en la construcción y optimización de procesos de transformación de datos.
• Participar en el diseño de arquitecturas y soluciones de datos.
• Implementar modelos de datos y transformaciones sobre Data Lakes.
• Colaborar en la definición de requerimientos técnicos para pipelines y procesos de datos.
• Probar y aplicar nuevas tecnologías del ecosistema Big Data y cloud en proyectos reales.

Requirements

• +3 años de experiencia como Data Engineer en entornos Big Data.
• Experiencia sólida trabajando con Python y PySpark.
• Experiencia con Scala en entornos de datos.
• Experiencia trabajando con Databricks (imprescindible).
• Experiencia en procesamiento distribuido con Apache Spark.
• Conocimiento de arquitecturas de datos sobre Data Lake (modelado, particionado, optimización).
• Experiencia en entornos cloud (Azure, AWS o GCP).

Nice to Have

• Experiencia con orquestadores como Airflow o Databricks Workflows.
• Conocimiento de herramientas como dbt, Snowflake o similares.
• Experiencia con CI/CD y buenas prácticas de desarrollo.
• Nivel fluido de Inglés.

We Offer

• Posición estable y con proyección: tendrás la oportunidad de construir tu carrera a largo plazo, en proyectos de Data & Analytics que generan impacto de verdad.
• Flexibilidad: Modelo de trabajo híbrido adaptado a las necesidades del equipo, con posibilidad de modalidad 100% remoto según la ubicación.
• Jornada intensiva los viernes y durante julio y agosto.
• Salario acorde a tu formación y experiencia.
• Apoyo económico para el teletrabajo.
• Formación continua: certificaciones oficiales, conferencias, workshops y cursos.
• Retribución flexible: ticket restaurante, ticket guardería, ayuda al transporte y seguro médico privado con Mapfre, extensible a tu familia.

About the Company

SDG Group is a global consulting firm specialized in Data & Analytics.

We are catalysts of innovation. We combine our unique approach to business challenges with the synergies and reach of a truly global firm. This is SDG Group, where the AI-driven futures we build with our clients are backed by three decades of experience in data, analytics, and business insights.

SDG Group works on the pillars of a Triple Expertise, incorporating business process skills by domain with a technological knowledge and a partnership with the most important and innovative software providers. Our portfolio also features cutting-edge laboratories and the development of Advanced Analytics & AI technologies.

🔝 OUR MARKET POSITION: SDG Group has a market leader position both at a global and a local level, recognised by the main market analysts in the AI, Data & Analytics space.

👨🏻‍💻 +2,500 EMPLOYEES: Driven by talent and innovation. We are constantly growing by attracting and retaining the best talents from the market.

🌍 GLOBAL PRESENCE: Customer proximity is our purpose. Since November 2020 SDG joined Alten Group.

🤩 +185M VOLUME OF ACTIVITY: A growth mind-set to keep moving forward.

🤝 +700 CUSTOMER BASE: Our customer at the center. We serve an ever-increasing number of clients around the world.

Sigue descubriendo quiénes somos:

• En nuestra web corporativa.
• Nuestras publicaciones y contenido en Medium.
• En nuestras redes sociales: Instagram, LinkedIn y YouTube.