Big Data Software Engineer [Senior/Lead]

Про посаду

Ми шукаємо досвідченого Senior/Lead Big Data Software Engineer для приєднання до нашої інноваційної команди.

Ідеальний кандидат підтримає розробку стратегії, орієнтованої на клієнта, яка спрямована на підвищення автоматизації та використання даних та аналітики протягом усіх етапів взаємодії з клієнтами. Кандидат буде відповідальним за визначення релевантних даних та використання інструментів, технологій та процесів для розробки безперервних, керованих даними та автоматизованих комунікацій з клієнтами в сфері маркетингу та обслуговування.

Обов'язки

• Створення та управління ресурсами хмари AWS
• Впровадження інтеграції та обробки даних з використанням технологій Big Data з різноманітних джерел даних, таких як RDBMS та REST HTTP API
• Виконання трансформації та обробки даних з використанням Spark та інших хмарних сервісів для підтримки бізнес-логіки
• Розробка та підтримка автоматизованих перевірок якості даних для забезпечення точності та цілісності даних
• Створення інфраструктури для збору, трансформації, об'єднання та розповсюдження даних клієнтів
• Дослідження можливостей удосконалення процесів для оптимального збору даних та генерації інсайтів
• Забезпечення масштабованості, ефективності, точності та гнучкості рішень для даних
• Аналіз складних наборів даних для виявлення паттернів та трендів
• Розробка фреймворків для візуалізації даних для презентації аналітичних результатів зацікавленим сторонам
• Активна участь у церемоніях Scrum з агільними командами
• Розробка запитів, створення звітів та презентація результатів
• Наставництво молодшим членам команди та просування кращих практик галузі

Вимоги

• 5+ років досвіду в інженерії даних у сфері фінансових послуг для споживачів або суміжних галузях
• Доведений досвід у Python, Pyspark або технологіях AWS, включаючи Lambda, Airflow та Athena
• Досвід роботи з інструментами Big Data, такими як HDFS, YARN, Hive, Spark, Kafka та AWS у виробничому середовищі
• Знання використання Docker, Kubernetes та Snowflake у виробничому середовищі
• Міцний фундамент у математиці, статистиці, комп'ютерних науках, дата-науці чи подібних галузях
• Знання бізнес-аналітики, аналітичних інструментів та технік візуалізації даних
• Чудові організаційні навички з можливістю керувати кількома проектами та виконувати терміни
• Ефективні комунікаційні навички для артикуляції результатів нетехнічній аудиторії
• Постійне навчання та інтеграція нових технологій у рішення

Буде плюсом

• Сертифікація AWS
• Досвід роботи з Kafka Streaming та Kafka Connect
• Знання ELK Stack
• Досвід у керування базами даних Cassandra або MongoDB

Місцезнаходження

• Віддалено в Україні

Про компанію

[Опис компанії, якщо є]