Lead Data Integration Engineer

Про посаду

Ми шукаємо Lead Data Integration Engineer, щоб створювати та оптимізувати дата-пайплайни в екосистемі AWS, забезпечуючи безперебійну інтеграцію та надійну звітність для процесів прийняття критичних рішень.

Обов'язки

• Співпраця з бізнес-аналітиками для розуміння та впровадження вимог до даних
• Проектування та розробка ефективних дата-пайплайнів з використанням технологій AWS
• Забезпечення надійності, продуктивності та масштабованості дата-пайплайнів
• Оперативне виявлення та вирішення проблем інтеграції даних
• Впровадження картувань даних, агрегацій та перевірок якості на основі вказівок бізнес-аналітиків
• Ведення чіткої та вичерпної документації процесів інтеграції
• Підтримка процесів переходу даних за допомогою Iceberg
• Забезпечення запитів та маніпуляцій з даними за допомогою SQL
• Використання інструментів DBT та Airflow для оркестрації пайплайнів та моделювання даних
• Відповідність процесів інтеграції даних стандартам та кращим практикам

Вимоги

• 5+ років досвіду роботи в інтеграції даних та складанні дата-варехаусів
• Знання DBT, Airflow та SQL для трансформації, оркестрації та запитів до даних
• Навички Python для розробки API та автоматизації
• Досвід роботи з Iceberg для управління активами даних та переходу
• Знання Snowflake та Power BI для складання дата-варехаусів та візуалізації
• Доведений досвід у моделюванні даних та налаштування продуктивності бази даних
• Знання про впровадження перевірок якості даних та процесів агрегації
• Сильні навички вирішення проблем, аналітичного мислення та комунікації
• Ефективне використання інструментів інтеграції даних у хмарних середовищах (AWS)

Ми пропонуємо

• Можливість працювати дистанційно в Україні
• Захоплююча роль у провідній технологічній компанії, EPAM Systems

Про компанію

EPAM Systems є глобальною компанією з інженерії програмного забезпечення та розробки продуктів, яка надає цифрові платформи та рішення для деяких із провідних світових брендів.