Senior Data Engineer

Про посаду

Ми шукаємо висококваліфікованого Senior Data Engineer для проектування, створення та підтримки масштабованої інфраструктури та конвеєрів даних. На цій посаді ви будете відповідальним за забезпечення надійної обробки даних, високу якість даних та підтримку аналітичних та бізнес-аналітичних потреб у всій організації. Ви будете працювати з масштабованими розподіленими системами, сучасними платформами даних та системами обробки даних як у пакетному, так і в реальному часі.

Обов'язки

• Проектування, розробка та підтримка надійних ETL/ELT конвеєрів даних
• Створення та оптимізація масштабованих систем обробки даних (пакетна та потокова обробка)
• Проектування та управління датовими озерами, сховищами даних та датовими мартами
• Розробка трансформацій даних за допомогою SQL, Python та Apache Spark (PySpark)
• Інтеграція даних з різних джерел (бази даних, API, потокові системи)
• Забезпечення якості, цілісності та консистентності даних за допомогою валідації та моніторингу
• Оптимізація продуктивності конвеєрів даних (партіціонування, індексування, налаштування запитів)
• Реалізація та підтримка оркестрації робочих процесів (наприклад, Apache Airflow)
• Співпраця з крос-функціональними командами (Датові аналітики, Датові вчені, Інженери Backend)
• Підтримка та внесення змін у CI/CD конвеєри для датових робочих процесів
• Документування датової архітектури, процесів та стандартів

Вимоги

Технічні навички:

• 4+ роки професійного досвіду роботи Data Engineer або на аналогічній посаді
• Глибоке знання SQL (наприклад, PostgreSQL, Snowflake, BigQuery, Redshift)
• Практичний досвід роботи з Apache Spark / PySpark
• Глибоке розуміння моделювання даних (нормалізовані та дименсіональні моделі)
• Досвід проектування та впровадження ETL/ELT конвеєрів
• Досвід роботи з хмарними платформами (AWS, GCP, або Azure)
• Досвід роботи з:
  • Kubernetes
  • Інструменти контейнеризації (Docker)
  • Системи контролю версій (Git)

Буде плюсом:

• Досвід роботи з потоковою обробкою (наприклад, Apache Kafka, Kinesis, Flink)
• Знання інструментів сучасного датового стеку (наприклад, dbt, Delta Lake, Iceberg)
• Досвід роботи з інструментами управління та лінійністю даних
• Знання інфраструктури як коду (наприклад, Terraform)

Ми пропонуємо

• Оплачувану відпустку та лікарняні
• Конкурентоспроможну зарплату
• Гнучкий робочий графік
• Кар'єрний ріст
• Корпоративні святкування та подарунки
• Корпоративні курси англійської мови
• Офісна/гібридна робота у Тернополі або можливість віддаленої роботи
• Кава, чай, фрукти та печиво в офісі

Зв'яжіться з нами

Отримайте безкоштовну консультацію з нашим експертом, щоб спланувати наступні кроки

Україна

+380 (68) 672 57 67

[email protected]

Площа Перемоги, 4А Тернопіль, Україна 46000

США

201-732-9995

[email protected]

66 Willow Ave Hoboken NJ 07030

Естонія

Amazinum OÜ

Реєстраційний код: 16893164

Harju maakond, Tallinn, Kesklinna linnaosa, Tornimäe tn 5, 10145