Junior Data Engineer (6-Month Engagement)

Про посаду

N-iX шукає Junior Data Engineer для приєднання до команди, орієнтованої на дані, яка підтримує щоденні операції та постійний розвиток корпоративних рішень для даних. Це 6-місячне завдання з можливістю отримати практичну досвід роботи з сучасними хмарними платформами для даних, великими наборами даних та виробничими дата-пайплайнами.

Ви будете тісно співпрацювати з досвідченими Data Engineers, сприяючи підтримці пайплайнів, вирішенню проблем, інтеграції нових джерел даних та впровадженню чітко визначених удосконалень по всій платформі для даних. Ця посада ідеально підходить для інженерів з 1-2 роками професійного досвіду, які хочуть поглибити свою експертизу в галузі інженерії даних та хмарних технологій.

Обов'язки

• Моніторинг та підтримка запланованих та подієвих дата-пайплайнів, завдань обробки даних, оновлення звітів та перевірок якості даних.
• Виконання стандартних дій з інтеграції та оновлення даних з різних джерел, включаючи API, CSV файли, синдиковані набори даних та конфігураційні входи.
• Впровадження чітко визначених змін у Python, PySpark та SQL, включаючи нові фільтри, трансформації, відображення, правила перевірки, валідації та невеликі удосконалення пайплайнів.
• Виконання перевірок схеми, узгоджувальних перевірок, регресійних тестувань та перевірок даних від джерела до цілі.
• Дослідження збоїв у пайплайнах, проблем з валідацією, відсутніх даних, відхилених файлів та розбіжностей у звітах.
• Вирішення першочергових операційних інцидентів за допомогою логів, виходів завдань та інструментів моніторингу.
• Ескалація складних технічних або бізнес-проблем з даними з чіткою діагностичною інформацією та підтверджуючими доказами.
• Ведення технічної документації, приміток про розгортання, керівництв, конфігураційних файлів та операційних записів.
• Дотримання встановлених інженерних практик, включаючи Git-потоки, запити на злиття, перевірки коду та процедури тестування та розгортання.
• Підтримка інтеграції нових джерел даних та внесення внесків у ініціативи з безперервного вдосконалення.

Вимоги

Обов'язково

• 1-2 роки професійного досвіду в інженерії даних, розробці ETL/ELT, аналітичній інженерії даних або ролях підтримки даних.
• Гарне знання Python та SQL.
• Розуміння пайплайнів для даних, трансформацій даних, пакетної обробки та концепцій ETL/ELT.
• Знання реляційних баз даних та концепцій сховищ даних.
• Досвід роботи з інтеграцією API та обробкою даних на основі файлів (CSV, Parquet тощо).
• Практичний досвід роботи з Git, потоками управління версіями, запитами на злиття та перевірками коду.
• Розуміння принципів якості даних, включаючи перевірку, узгодження, перевірки схеми та обробку помилок.
• Здатність аналізувати логи, вирішувати проблеми та чітко передавати свої висновки.
• Сильні аналітичні та проблемно-орієнтовані навички.
• Середній або вищий рівень англійської мови.

Буде плюсом

• Досвід роботи з Azure Data Factory, Azure Databricks, PySpark, Snowflake, Delta Lake, Azure Data Lake Storage або подібними хмарними технологіями для даних.
• Знання сучасних архітектур платформ для даних, включаючи паттерни обробки даних Medallion (Bronze-Silver-Gold).
• Знання Power BI або інших платформ для BI/звітування.
• Знання хмарних середовищ та практик DevOps.
• Досвід роботи з фреймворками для перевірки даних, такими як Pandera.
• Розуміння CI/CD-пайплайнів та процесів розгортання.

Що робить вас чудовим кандидатом

• Вам подобається працювати з даними та вирішувати технічні проблеми.
• Ви уважні до деталей і несе відповідальність за якість своєї роботи.
• Вам комфортно працювати в рамках встановлених процесів, одночасно навчаючись новим технологіям.
• Ви чітко спілкуєтесь та ефективно співпрацюєте з технічними та нетехнічними зацікавленими сторонами.
• Ви проактивні, цікаві та прагнете розвивати свої навички інженерії даних у виробничому середовищі.

Ми пропонуємо

• Гнучний робочий формат - віддалено, в офісі або гнучко
• Конкурентоспроможну зарплату та хороший компенсаційний пакет
• Індивідуальний кар'єрний ріст
• Інструменти для професійного розвитку (програма наставництва, технічні лекції та тренінги, центри досконалості тощо)
• Активні технічні спільноти з регулярним обміном знаннями
• Відшкодування витрат на освіту
• Пам'ятні подарунки до ювілеїв
• Корпоративні заходи та командоутворення
• Інші переваги, що залежать від місцязнаходження

не застосовується до фрілансерів

Про компанію

N-iX - провідна компанія з розробки програмного забезпечення, яка співпрацює з бачними підприємствами для надання інноваційних цифрових рішень. Ми прагнемо створити співробітницьке та інклюзивне робочі середовище, де наші команди можуть процвітати та розвиватися.