Senior Data Engineer

Про посаду

Ми шукаємо Senior Data Engineer з 8+ роками досвіду для приєднання до нашої команди в Remote Ukraine. Основна мета - модернізувати, підтримувати та розвивати платформу електронної комерції для великого американського роздрібного підприємства, зосереджуючись на обробці великих даних та хмарних рішеннях.

Обов'язки

• Розробка та впровадження моделей даних для підтримки ефективного зберігання та отримання даних.
• Розробка надійних та масштабовних ETL/ELT трубопроводів.
• Інтеграція даних з різних джерел, включаючи бази даних, API та зовнішніх постачальників даних.
• Розробка та впровадження рішень для сховищ даних.
• Виконання складних запитів, перетворень даних та налаштування продуктивності на хмарних сховищах даних.
• Інтеграція процесів метаданих та управління в хмарні платформи для зберігання даних.

Вимоги

• Обов'язково

  • Готовність працювати до 20:00 за центральноєвропейським часом (немає необхідності в надурочній роботі)
  • Загальний досвід роботи не менше 8+ років (щонайменше 1+ рік на посаді Лід/Архітектор)
  • Сильний, недавній досвід роботи з Azure Data Factory та Synapse (3+ роки)
  • Сильний досвід у розробці та впровадженні моделей даних, включаючи концептуальні, логічні та фізичні моделі даних
  • Глибокі знання Microsoft Azure, включаючи Azure Data Lake Storage, Azure Synapse Analytics, Azure Data Factory та Azure Databricks, pySpark для створення масштабовних та надійних рішень для даних
  • Великий досвід у створенні надійних та масштабовних ETL/ELT трубопроводів
  • Володіння SQL для виконання складних запитів, перетворень даних та налаштування продуктивності на хмарних сховищах даних
  • Володіння розробкою та впровадженням рішень для сховищ даних (дименсіональне моделювання, зірчасті схеми, Data Mesh, Data/Delta Lakehouse, Data Vault)
  • Досвід інтеграції процесів метаданих та управління в хмарні платформи для зберігання даних
  • Досвід роботи з хмарними аналітичними базами даних
  • Досвід роботи з Python та Python-заснованими інструментами ETL
  • Досвід роботи зі скриптами на Bash, Unix чи Windows shell є бажаним
  • Доведена здатність керувати крос-функціональними інженерними командами, визначати технічну стратегію та архітектуру, забезпечувати реалізацію складних платформ для даних, надавати менторство інженерам та ефективно спілкуватися зі стейкхолдерами на всіх рівнях організації

• Буде плюсом

  • Досвід роботи з Elasticsearch
  • Знання технологій контейнеризації та оркестрації (Docker, Kubernetes)
  • Навички діагностики та налаштування продуктивності: здатність виявляти та вирішувати проблеми з продуктивністю в робочих процесах обробки даних та оптимізація трубопроводів даних для ефективного завантаження та аналізу даних
  • Навички співпраці та спілкування: сильні міжособистісні навички для ефективної співпраці зі стейкхолдерами, інженерами даних, науковцями-дата-сайєнтистами та іншими крос-функціональними командами
  • Здатність планувати, оцінювати та відстежувати прогрес впровадження функцій
  • Академічні та освітні кваліфікації в галузі комп'ютерних наук та дата-сайєнс

Мови

• Англійська: B2 Upper Intermediate

Ми пропонуємо

• Можливість працювати дистанційно з України
• Конкурентоспроможна зарплата та пакет соціальних виплат
• Можливості для професійного зростання та розвитку

Про компанію

Приєднуйтесь до нашої команди та сприяйте модернізації та розвитку платформи електронної комерції для великого американського роздрібного підприємства, яке обслуговує мільйони клієнтів щотижня через багатоканальні канали.