Senior Data Engineer

Про посаду

Ми шукаємо Senior Data Engineer для приєднання до нашої компанії, що займається кліматичними технологіями в Ісландії, з фокусом на розробці та підтримці корпоративних платформ даних.

Обов'язки

• Проектування, створення, підтримка та вдосконалення дата-піпайнов і компонентів платформи даних в Azure Databricks
• Автоматизація ручного збору даних, обробки та звітування для підвищення ефективності та якості даних
• Розробка масштабованих рішень для надходження, трансформації та моніторингу даних з використанням Python, Spark, Terraform та хмарних сервісів
• Відповідальність за щоденні операційні завдання, пов'язані з платформою даних, включаючи усунення неполадок у піпайнах та оптимізацію
• Підтримка науковців та технічних користувачів, надаючи можливості для самостійного доступу до даних та їх дослідження
• Створення надійних рішень для обробки даних, що перетворюють лабораторні, польові та операційні дані у довірені набори даних
• Покращення спостережуваності та моніторингу платформи за допомогою Grafana та супутніх інструментів
• Тісна співпраця з керівником відділу даних щодо планування, визначення пріоритетів, архітектурних рішень та підходів до впровадження
• Виявлення можливостей для стандартизації процесів роботи з даними, усунення ручної роботи та підвищення рівня впровадження даних у всій організації
• Внесення вкладу у фундамент для майбутніх AI-додатків та можливостей самостійного доступу до даних у рамках платформи Databricks
• Документування рішень, операційних процедур та архітектурних рішень

Вимоги

• Диплом (бакалавр або магістр) із комп'ютерних наук або аналогічної галузі
• 6+ років досвіду роботи з рішеннями для інженерії даних та дата-піпайнами
• Сильні навички розробки на Python
• Практичний досвід роботи з Apache Spark та Databricks
• Досвід створення, підтримки та усунення неполадок дата-піпайнів продуктового рівня
• Досвід роботи з Infrastructure as Code, бажано Terraform
• Досвід роботи з хмарними сервісами Azure
• Досвід роботи з Git-базованими робочими процесами розробки та практиками CI/CD
• Розуміння принципів інженерії програмного забезпечення, включаючи тестування, підтримку та операційну підтримку
• Досвід роботи з Grafana для моніторингу, спостережуваності та візуалізації даних
• Здатність працювати самостійно, відповідально та керувати ініціативами від планування до впровадження
• Досвід автоматизації ручних бізнес-процесів за допомогою даних та програмних рішень
• Сильні навички аналітичної роботи та вирішення проблем
• Відмінні комунікативні навички, здатність спілкуватися з технічними та нетехнічними зацікавленими сторонами
• Орієнтація на дії та якість
• Досвід роботи в розподіленому, крос-культурному Agile середовищі
• Англійська: верхній середній / вищий рівень

Буде плюсом

• Досвід створення платформ самостійного доступу до даних
• Досвід роботи з потоковою або майже реальною обробкою даних
• Досвід роботи з можливостями AI/ML у Databricks
• Досвід оптимізації навантажень Spark та піпайнів обробки даних
• Знання shell-скриптування

Ми пропонуємо

• Сучасні технології, розробка нових продуктів, різні бізнес-домени.
• Гнучкість стартапу в поєднанні зі зрілими практиками доставки та управлінням.
• Сильний фокус на вашому технічному та особистому зростанні.
• Прозоре кар'єрне зростання та індивідуальний план розвитку.
• Гнучкий робочий режим (віддалено/робота з офісу), можливість повної віддаленої роботи.
• Конкурентоспроможна компенсація та соціальний пакет
• Фокус на добробуті та людському підході.
• Плоска організація, де кожен чує та запрошується до участі.
• Підхід до балансу між роботою та особистим життям.
• Пристрасть та задоволення у всьому, що ми робимо.

Про компанію

HBM - це європейська компанія, яка створює нові продукти з нуля для стартапів та допомагає зрілим компаніям у їхньому шляху до дата-драйвоної інновації та рішень на базі AI. Наша експертиза стосується EnergyTech, FinTech, ClimateTech, SocialTech, PropTech тощо.

Заснована в Україні та розвинута на основі скандинавської культури, HBM набирає співробітників як в Україні, так і в ЄС для наших клієнтів, розташованих в Європі та США.

Наші цінності включають навички, пристрасть, досконалість, рівність, відкритість, взаємоповагу та довіру.

У HBM ви можете стати частиною зростаючої компанії, працювати з креативними колегами та насолоджуватися сучасними технологіями та створенням рішень на базі AI. Ви станете частиною сильної корпоративної культури, поєднаної з гнучкістю та гнучкістю стартапу, підтримуваної перевіреними практиками аутсорсингу та розробки, людсько-орієнтованою командою керівництва, підприємницьким мисленням та підходом до балансу між роботою та особистим життям.