Senior Data Engineer

Про посаду

Ми набираємо Senior Data Engineer до команди Intellias для участі у програмі міграції масштабної корпоративної платформи даних для клієнта фінансових послуг. Це практична посада рівня Senior. Ви будете писати код для виробництва щотижня, відповідати за архітектурні рішення у своєму робочому потоці та надавати менторство інженеру середнього рівня.

Обов'язки

• Забезпечувати повний цикл доставки одного або кількох пріоритетних доменів даних на Azure Databricks.
• Проектувати та будувати медальйонні (Bronze / Silver / Gold) трубопроводи за допомогою Lakeflow Declarative Pipelines, Auto Loader, Structured Streaming та Delta Lake з Liquid Clustering.
• Реєструвати відібрані продукти даних у Unity Catalog з правильними тегами, масками, фільтрами рядків, лініями та політиками доступу.
• Реалізувати ворота якості даних на кордоні Silver-to-Gold та вдосконалювати правила разом із стевардами домену.
• Пакувати та розгортати роботу за допомогою Databricks Asset Bundles через Azure DevOps CI/CD.
• Писати автоматизовані тести та документацію.
• Працювати на рівні AI-as-Collaborator із шляхом до AI-as-Orchestrator, використовуючи Claude Code, Databricks Assistant, GitHub Copilot та інструменти MCP-підключеного агента для прискорення повторюваних частин створення, тестування та розгортання трубопроводів.

Вимоги

• 6+ років досвіду інженерії даних, принаймні останні три роки на Databricks у виробництві.
• Глибокий практичний досвід роботи з медальйонною / Lakehouse архітектурою, Delta Lake, Unity Catalog, Lakeflow Declarative Pipelines та Databricks Asset Bundles.
• Значний досвід роботи з Python, PySpark та SQL, зручність у діагностуванні проблем з продуктивністю на великих навантаженнях через Spark UI та Photon.
• Реальний досвід роботи з інтенсивною інтеграцією (Kafka Structured Streaming, Auto Loader) та паттернами CDC.
• Досвід впровадження якості даних у масштабі (Great Expectations або еквівалент), а також лінія, каталогізація та контроль доступу.
• CI/CD на платформах даних через Azure DevOps або GitHub Actions, з інфраструктурою як кодом (Terraform або еквівалент).
• Вільне володіння англійською мовою.

Буде плюсом

• Активні сертифікати Databricks.
• Попередній досвід роботи з платформами управління інвестиціями, даними операцій з активами, даними ринкових стрічок від провідних постачальників.
• Сертифікація CDMP DAMA або еквівалентна кваліфікація з управління даними.
• Досвід застосування інженерних інструментів для виробництва даних (не тільки для особистої продуктивності), включаючи MCP-підключені Databricks або хмарні сервери.

Ми пропонуємо

• Конкурентоспроможну зарплату.
• Можливість віддаленої роботи.
• Бюджет на професійний розвиток.

Про компанію

У Intellias, де технологія займає центральне місце, люди завжди йдуть перед процесами. Створюючи комфортну атмосферу в нашій команді, ми дозволяємо людям розкрити свій справжній потенціал і досягти надзвичайних результатів. Ось чому ми пропонуємо ряд переваг, які підтримують ваше благополуччя та стимулюють ваш професійний ріст.

Ми прагнемо сприяти рівності, різноманіттю та інклюзивності як роботодавець, який забезпечує рівні можливості. Всі претенденти будуть розглядатися для працевлаштування без дискримінації за ознакою раси, кольору шкіри, релігії, віку, статі, національності, інвалідності, сексуальної орієнтації, гендерної ідентичності чи самовираження, статусу ветерана чи будь-якої іншої ознаки, захищеної чинним законодавством.

Ми вітаємо та святкуємо унікальність кожної людини. Приєднуйтесь до Intellias для кар’єри, де ваші перспективи та внески є важливими для нашого спільного успіху.