Job Description, Responsibilities & Requirements
Description language:
Про посаду
Ми шукаємо Senior Azure Data Engineer, щоб приєднатися до нашої команди та керувати розробкою та оптимізацією масштабних рішень для обробки даних у хмарі.
Ідеальний кандидат матиме глибокі знання у PySpark, великий досвід роботи з Azure Data Factory та Synapse, а також міцний досвід у сучасних практиках DevOps.
Обов'язки
- Розробка, створення та оптимізація масштабних рішень для обробки даних з використанням PySpark
- Впровадження та підтримка розширених трубопроводів та робочих процесів у Azure Data Factory та Azure Synapse
- Розробка, автоматизація та моніторинг трубопроводів розробки та складання для надійних рішень інженерії даних
- Співпраця з крос-функціональними командами для надання масштабних та надійних рішень для обробки даних
- Застосування кращих практик для оптимізації коду, контролю версій з використанням Git та автоматизації інфраструктури
- Інтеграція Azure Functions для оркестрації та перетворення завдань з даними
- Внесення вкладу у налаштування та автоматизацію інфраструктури за допомогою Terraform
- Документування рішень та наставництво молодших членів команди
Вимоги
- Мінімум 8 років досвіду в інженерії даних
- Знання PySpark з акцентом на написання оптимізованого та масштабного коду
- Досвід роботи з Azure Data Factory та Azure Synapse для інтеграції та оркестрації даних
- Навички роботи з сервісами Azure та Azure Functions
- Досвід у проектуванні та управлінні трубопроводами розробки та складання в хмарних середовищах
- Володіння Git для контролю версій та співпраці
- Знання Terraform для автоматизації інфраструктури
- Кваліфікація з інтеграції Azure Functions у робочі процеси з даними
- Знання з побудови трубопроводів розробки та складання
- Розширені знання Azure DevOps, CI/CD та інструментів інфраструктури як коду
- Компетентність у навичках вирішення проблем, комунікації та документування
Ми пропонуємо
- Можливість працювати дистанційно з України
- Участь у передових проектах інженерії даних
- Співпраця з командою досвідчених професіоналів
Про компанію
EPAM Systems є глобальною компанією з інженерії програмного забезпечення та розробки продуктів, яка забезпечує цифрову трансформацію та технологічні інновації для провідних компаній світу.