Big Data Software Engineer [Senior/Lead]

Про посаду

Ми шукаємо досвідченого Senior/Lead Big Data Software Engineer для приєднання до нашої інноваційної команди.

Ідеальний кандидат підтримає розробку стратегії, орієнтованої на клієнтів, яка спрямована на збільшення автоматизації та використання даних та аналітики протягом усіх етапів взаємодії з клієнтами. Кандидат буде відповідальним за визначення відповідних даних та використання інструментів, технологій та процесів для розробки безперервних, керованих даними та автоматизованих комунікацій з клієнтами в сфері маркетингу та обслуговування.

Обов'язки

• Створення та управління ресурсами хмари AWS
• Впровадження інтеграції та обробки даних з використанням технологій Big Data з різноманітних джерел даних, таких як RDBMS та REST HTTP API
• Виконання трансформації та обробки даних з використанням Spark та інших хмарних сервісів для підтримки бізнес-логіки
• Розробка та підтримка автоматизованих перевірок якості даних для забезпечення точності та цілісності даних
• Створення інфраструктури для збору, трансформації, об'єднання та розповсюдження клієнтських даних
• Дослідження можливостей удосконалення процесів для оптимального збору даних та генерації інсайтів
• Забезпечення масштабованості, ефективності, точності та гнучкості рішень для даних
• Аналіз складних наборів даних для виявлення паттернів та трендів
• Розробка фреймворків для візуалізації даних для презентації аналітичних результатів зацікавленим сторонам
• Активна участь у церемоніях Scrum з агільними командами
• Розробка запитів, створення звітів та презентація результатів
• Наставництво молодшим членам команди та просування кращих практик галузі

Вимоги

• 5+ років досвіду в інженерії даних у сфері фінансових послуг для споживачів або суміжних галузях
• Доведений досвід у Python, Pyspark або технологіях AWS, включаючи Lambda, Airflow та Athena
• Досвід роботи з інструментами Big Data, такими як HDFS, YARN, Hive, Spark, Kafka та AWS
• Знання використання Docker, Kubernetes та Snowflake в середовищі виробництва
• Міцний фундамент у математиці, статистиці, комп'ютерних науках, дата-науці чи подібних дисциплінах
• Знання бізнес-аналітики, аналітичних інструментів та технік візуалізації даних
• Чудові організаційні навички з можливістю керувати кількома проектами та виконувати терміни
• Ефективні комунікаційні навички для артикуляції результатів нетехнічній аудиторії
• Постійне навчання та інтеграція нових технологій у рішення

Буде плюсом

• Сертифікація AWS
• Досвід роботи з Kafka Streaming та Kafka Connect
• Знання ELK Stack
• Досвід у керування базами даних Cassandra або MongoDB

Про компанію

EPAM Systems є глобальною компанією з інженерії програмного забезпечення та розробки продуктів, яка спеціалізується на наданні цифрових платформ та рішень клієнтам у різних галузях. Ми прагнемо до інновацій, якості та успіху клієнтів.

Ми пропонуємо

• Можливість працювати дистанційно з Львова, Україна
• Конкурентоспроможний компенсаційний пакет
• Професійні можливості для зростання та розвитку
• Колаборативне та інклюзивне робочі середовище