Data Engineer
Primary stack
PythonDatabricksAWSNoSQLETLAPI
Nice to have's
JavaSpring BootDevOpsJiraJenkinspytest
Job description
About the Position
Diseña pipelines de datos escalables en la nube con Python, Databricks y AWS, y convierte datos complejos en soluciones fiables que impulsen decisiones estratégicas.
Responsibilities
- Liderar el diseño, desarrollo y mantenimiento de pipelines de datos escalables y eficientes en la nube.
- Diseñar y desarrollar pipelines de datos escalables y servicios de datos usando Python y otras tecnologías relevantes.
- Construir y mantener procesos ETL/ELT robustos y automatizados.
- Integrar datos de múltiples fuentes, incluyendo APIs, bases de datos, archivos y sistemas de terceros.
- Desarrollar APIs y servicios de ingestión de datos cuando sea necesario.
- Aplicar las mejores prácticas de desarrollo de software.
- Optimizar el rendimiento y la escalabilidad de los procesos de ingestión y transformación de datos.
- Trabajar estrechamente con equipos de Data Science, BI, Product y Software Engineering.
- Diseñar soluciones teniendo en cuenta la seguridad, calidad de datos, gobernanza y cumplimiento normativo.
- Contribuir a decisiones técnicas y arquitectura, ayudando a evolucionar nuestra plataforma de datos y estándares de desarrollo.
- Documentar soluciones técnicas, APIs, pipelines y procesos.
Requirements
- Experiencia sólida en desarrollo con Python, especialmente para procesamiento, transformación, integración y análisis de datos.
- Experiencia en diseño, desarrollo y consumo de APIs y servicios de integración de datos.
- Sólidas prácticas de desarrollo de software, incluyendo código limpio y mantenible, control de versiones, revisiones de código, pruebas automatizadas y CI/CD.
- Experiencia práctica con contenedores y entornos OpenShift.
- Conocimiento sólido de bases de datos relacionales (PostgreSQL, SQL Server, o similares) y bases de datos NoSQL (MongoDB, Couchbase, o similares).
- Experiencia práctica con plataformas en la nube y servicios de datos basados en la nube (AWS, Azure, o GCP).
- Comprensión sólida de Data Lakes, Data Warehouses y arquitecturas de datos modernas.
- Experiencia con librerías de ingeniería de datos y análisis en Python, como Pandas, NumPy y PySpark y Spark.
- Experiencia práctica con Databricks, incluyendo ingeniería de datos, análisis y desarrollo de soluciones escalables de procesamiento de datos.
- Conocimiento de tecnologías de Big Data, como Spark o Hadoop.
- Experiencia en el desarrollo y mantenimiento de pipelines ETL/ELT y procesos de ingestión de datos.
Nice to Have
- Experiencia con tecnologías de streaming de datos, como Kafka.
- Experiencia con gobernanza de datos, seguridad y requisitos normativos.
- Experiencia con herramientas de visualización de datos, como Matplotlib, Seaborn o Plotly.
- Experiencia previa en el sector financiero u otros entornos regulados.
- Experiencia con Java y desarrollo de Spring Boot.
- Sólidas habilidades técnicas en inglés.
- Experiencia con DevOps y herramientas de desarrollo, incluyendo Bitbucket, Jira, Jenkins y frameworks de pruebas como PyTest.
We Offer
- Oportunidad de ser tú mismo y trabajar con colegas apasionados por la tecnología y la innovación.
- Inversión en tu desarrollo profesional con formación, desayunos tecnológicos y asistencia a foros.
- Enfoque en el aprendizaje continuo, con un presupuesto personal para mantenerse actualizado con las tendencias del mercado.
- Atención al bienestar y felicidad en el trabajo, ofreciendo las mejores condiciones de trabajo en un entorno humano único.
- Flexibilidad y equilibrio entre trabajo y vida personal, premiados con el Madrid Flexible Company Award en 2020 y una mención honorífica en 2022.
- 42 beneficios, incluyendo formación profesional y certificaciones, horario flexible, jornada especial los viernes y verano, 6 días libres cada tres años, día libre en tu cumpleaños, beneficios por traer a un amigo, compensación flexible, Gimnasio a través de Gympass, oportunidades de voluntariado y eventos de empresa y team buildings.
About the Company
Somos parte del Grupo Alkemy, especializados en impulsar el crecimiento a través de nuestra experiencia tecnológica, abordando desafíos complejos y fomentando la excelencia operativa.
- Somos nativos digitales y neutrales tecnológicamente gracias a nuestras capacidades de rápida adaptación y habilidades de resolución de problemas en cualquier situación empresarial.
- Somos apasionados por los desafíos tecnológicos que tienen un impacto significativo en el negocio. Para abordarlos, contamos con equipos de alto rendimiento y la capacidad de combinar tecnologías rápida y eficazmente.
- Apoyamos a nuestros clientes en su evolución digital para lograr la máxima eficiencia en sus negocios, aprovechando nuestra extensa experiencia multisectorial.
Te invitamos a conocernos en profundidad explorando las diversas secciones de nuestro sitio web.
© INNOCV. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.