Senior Data Engineer

Про посаду

Ми шукаємо досвідченого Senior Data Engineer для приєднання до нашої команди.

Проект передбачає розробку та оптимізацію нової платформи для даних для адаптації нашої поточної системи обробки даних. Senior Data Engineer буде відповідальним за проектування, впровадження та обслуговування платформи для задоволення потреб бізнесу в даних. Якщо у вас є пристрасть до Data Software Engineering для створення впливових веб-додатків, ми хотіли б почути вас.

Обов'язки

• Розробка трубопроводів обробки даних за допомогою Azure Data Factory та Azure Functions
• Впровадження процесів інтеграції та трансформації даних за допомогою Databricks та PySpark
• Написання ефективного коду на Python та SQL для витягнення, трансформації та завантаження даних
• Співпраця із зацікавленими сторонами для збору вимог та забезпечення відповідності платформи бізнес-потребам
• Моніторинг та усунення проблем із продуктивністю платформи
• Впровадження заходів забезпечення якості даних та удосконалення процесів
• Оптимізація операцій зберігання та отримання даних
• Проведення аналізу даних та генерація інсайтів для прийняття рішень
• Навчання та наставництво молодших Data Engineers
• Участь у одноліткових оглядах коду та колективних командних заходах

Вимоги

• 3+ роки практичного досвіду в галузі big-data та досвід у Data Software Engineering
• Глибокі знання та досвід роботи з Azure Data Factory, Azure Functions та Databricks
• Володіння PySpark, Python та SQL
• Розуміння принципів пакетної обробки та ETL у сховищах даних
• Досвід роботи з сигналами про повноту даних та оркестрацією
• Знання про міграцію схем та еволюцію наборів даних
• Знання підходів для історичної повторної обробки та виправлення даних
• Хороші навички вирішення проблем та спілкування
• Вільне володіння англійською мовою на рівні B2+, сильне вміння говорити англійською

Буде плюсом

• Знання Microsoft Power BI
• Досвід роботи з Azure Blob Storage, Azure File Storage

Ми пропонуємо

• Віддалена робота в Україні

Про компанію

[Опис компанії, якщо є]