Senior Data Engineer

Про посаду

Чи ви захоплюєтесь створенням масштабних, надійних систем даних, які забезпечують реальні рішення? Ми шукаємо Senior Data Engineer, щоб приєднатися до нашої команди та працювати дистанційно з Європи, України або LATAM.

У Sigma Software ми співпрацюємо з інноваційними компаніями для надання передових технологічних рішень. Ця посада пропонує можливість створити та експлуатувати канонічну платформу даних, яка інтегрує різноманітні зовнішні джерела даних, забезпечуючи високу якість та гнучкість.

Чому варто приєднатися до нас? Ви будете працювати з сучасними технологіями, співпрацювати з талановитими професіоналами з різних регіонів та мати свободу експериментувати та інноваційно мислити, сприяючи впливовим проектам у сфері AdTech.

Обов'язки

• Створення та підтримка дата-піплайнів, які інтегрують дані з зовнішніх систем
• Робота як з повними завантаженнями даних, так і з регулярними інкрементальними оновленнями
• Розробка та підтримка інтеграцій з використанням Java
• Допомога у проектуванні та підтримці єдиної внутрішньої моделі даних
• Забезпечення якості даних та обробка неправильних або неповних даних
• Використання інструментів та підходів з штучним інтелектом для поліпшення якості даних, виявлення проблем та підтримки операцій, коли це доцільно
• Забезпечення надійності, гарного моніторингу та готовності дата-піплайнів до виробництва
• Тісна співпраця з інженерними та продуктовими командами щодо інтеграції та потреб у даних

Вимоги

• Не менше 5 років професійного досвіду роботи Data Engineer
• Сильний досвід роботи з Java у виробництві
• Досвід роботи принаймні з одним фреймворком обробки даних, таким як Apache Spark, Apache Beam або Apache Flink
• Досвід інтеграції зовнішніх систем через REST API, включаючи пагінацію, обмеження швидкості та аутентифікацію на основі токенів
• Сильні навички моделювання даних та досвід роботи зі структурованими, реляційними даними
• Значні знання SQL
• Досвід роботи з GCP Dataflow
• Досвід роботи з дата-піплайнами у виробничих середовищах
• Сильні комунікаційні навички та здатність працювати в командах
• Рівень англійської – Верхній середній

Буде плюсом

• Досвід роботи з подієво-орієнтованими архітектурами або системами обміну повідомленнями
• Досвід проектування канонічних схем для кількох джерел даних
• Досвід роботи з LLM

Ми пропонуємо

• Різноманітність доменів та бізнесів
• Різноманітність технологій
• Медична та юридична підтримка
• Активна професійна спільнота
• Постійне навчання та зростання
• Гнучкий графік
• Дистанційна робота
• Відмінні офіси (якщо ви цього забажаєте)
• Спортивні та громадські заходи

Про компанію

Наш клієнт – швидкозростаюча компанія в сфері AdTech, яка зосереджена на вирішенні реальних проблем у цифровій рекламі та маркетингу на основі даних. Вони спеціалізуються на створенні високонадійних та масштабних систем, які заохочують експерименти та інновації. Їхня платформа даних розроблена так, щоб бути потужною та гнучкою, дозволяючи інженерам впроваджувати нові ідеї та використовувати новітні технології для оптимізації ефективності реклами та інсайтів аудиторії.

Ключові технології: Java, Scala, SQL, GCP Dataflow, REST API, інструменти з штучним інтелектом, подієво-орієнтовані архітектури