Senior Data Integration Engineer (SQL, Azure, Snowflake)

Про посаду

Ми шукаємо мотивованого Старшого Інженера з Інтеграції Даних для приєднання до нашої команди та відігравання ключової ролі у створенні, оптимізації та міграції даних потоків через різноманітні системи. Ця посада зосереджена на використанні SQL, Azure, PySpark, HDFS та Snowflake для поліпшення робочих процесів з даними, забезпечення безперебійних інтеграцій та надання рішень складних задач з даними.

Обов'язки

• Проектування, розробка та оптимізація SQL запитів та збережених процедур для ефективної обробки та інтеграції даних
• Керівництво проектами міграції даних з локальних систем або старих середовищ до Azure Synapse Analytics
• Робота з розширеними концепціями Snowflake, такими як віконні функції, загальні табличні вирази (CTEs) та збережені процедури на JavaScript
• Реалізація даних потоків за допомогою PySpark та управління обробкою файлів у середовищах Hadoop HDFS
• Створення та усунення несправностей у трубах Azure Data Factory (ADF) для інтеграції даних з ADLS та SFTP у цільові системи
• Співпраця з крос-функціональними командами для реалізації та автоматизації повних робочих процесів з даними
• Моніторинг та підтримка продуктивності даних потоків, забезпечення масштабованості та надійності
• Розробка та підтримка технічної документації для архітектури даних, трансформацій та процесів потоку
• Надання технічного керівництва та наставництва молодшим інженерам та членам команди за потреби

Вимоги

• 3+ роки досвіду роботи з інтеграцією, міграцією та оптимізацією даних потоків через SQL та хмарні платформи
• Експертиза у роботі з Snowflake, включаючи Snowflake Analytics
• Розширені навички SQL з знанням віконних функцій, CTEs та збережених процедур на JavaScript
• Досвід роботи з PySpark та Hadoop HDFS, включаючи міграцію потоків з Cloudera Data Lake до Azure Synapse Analytics
• Володіння створенням труб ADF для передачі даних, що включає джерела, такі як ADLS та SFTP
• Компетентність у Python, PySpark та SQL для задач інженерії даних та автоматизації
• Розуміння хмарних сервісів Azure та досвід роботи з інструментами, такими як Azure Synapse Analytics та Power Automate
• Рівень англійської не нижче B2 (Upper-Intermediate) для ефективного спілкування

Буде плюсом

• Знайомство зі старими системами та досвідом роботи з інтеграцією даних з локальних середовищ у хмарні платформи
• Демонстрація методів налаштування продуктивності для збережених процедур Snowflake та SQL потоків
• Кваліфікації в додаткових сервісах Azure або сертифікації

Ми пропонуємо

З нами ви можете:

• Працювати за гнучним графіком дистанційно або з будь-якого з наших комфортних офісів або коворкінгів в Україні
• Отримувати необхідне обладнання для виконання своїх робочих завдань
• Міняти проекти та технологічні стеки всередині EPAM
• Набувати досвіду в різних бізнес-доменах (Страхування, Електронна комерція, Охорона здоров'я, Фінанси, Подорожі, Медіа, Штучний інтелект та інше)
• Можливості переїзду можуть бути доступні для відповідних кандидатів, залежно від посади та вакансій в інших офісах EPAM
• Брати участь у волонтерських, благодійних програмах та спільнотах (як технічних, так і за інтересами)

Ми фокусуємось на вашому професійному зростанні:

• Ви можете планувати свій індивідуальний кар'єрний шлях разом зі своїм менеджером
• Отримувати регулярний зворотний зв'язок від колег
• Покращувати англійську безкоштовно з сертифікованими викладачами (Клуби розмови, курси підготовки до співбесід з клієнтами тощо)
• Отримувати можливість проходити безкоштовне навчання та сертифікацію в AWS, GCP або Azure Clouds
• Користуватися внутрішньою програмою E-learn (понад 18,200 спеціалізованих навчальних та наставницьких програм)
• Отримувати доступ до корпоративних акаунтів на LinkedIn Learning, Get Abstract та інших партнерських ресурсах
• Навчатися в Школі архітектури рішень EPAM з інструкторами, які є практикуючими архітекторами
• Розвиватись як лідер, приєднуватись до школи управління доставками, управління ресурсами, основи лідерства та інше
• Брати участь у внутрішніх спільнотах (понад 500 зустрічей, технічних дискусій, сесій мозкового штурму, онлайн-подій та конференцій щорічно)

Відпустка та вигоди

• Відпустка та лікарняний лист (включаючи лікарняний лист без медичного сертифіката)
• Широкий спектр програм добровільного медичного страхування, що надають як медичне лікування, так і різні профілактичні опції (включаючи спортивні заходи)
• Медичне страхування для членів сім'ї за корпоративними тарифами
• Підтримка компанії під час значущих життєвих подій (народження дитини або усиновлення, одруження тощо)
• Підтримка психологічного комфорту: знижки на послуги від фахівців з психічного здоров'я або коучів, тематичні тренінги
• Програма E-kids - безкоштовна програма навчання програмуванню для дітей співробітників EPAM

Про компанію

[Опис компанії, якщо є]