Senior Software Engineer - Kyiv

Про посаду

Команда DataOS в AppsFlyer створює та експлуатує надійну, високомасштабну платформу даних, яка забезпечує аналітику та продуктові можливості в усіх напрямках компанії.

Ми обробляємо більше 150 мільярдів подій щодня та управляємо історичними даними в масштабі петабайт. Наша команда відповідає за набагато більше, ніж за традиційне "дата-озеро" - включаючи управління схемами, ETL-канали та інтерфейси до та зберігання.

Якщо вас хвилює масштаб, відповідальність та створення виробничих даних систем, ми хотіли б познайомитись з вами.

Основні технології

Ключові технології включають:

• Обробка та потокове передавання: Spark, Kafka
• Дата-озеро та формати: S3, Parquet, Delta Lake, Iceberg, Hadoop, Hive
• Хмара та обчислення: AWS, EMR/EMR Serverless, Athena
• Аналітика та платформи даних: BigQuery, BigLake, Aerospike, AWS Glue, Databricks Delta Engine
• Мови: Scala, Java, плюс більш різноманітне середовище програмування в AppsFlyer

Обов'язки

• Проектування, створення та розвиток масштабних даних каналів від первинного надходження до готових до виробництва наборів даних.
• Розробка та підтримка Spark/Scala-базованих робочих процесів обробки даних для пакетних та потокових випадків використання.
• Відповідальність за надійність, якість та продуктивність платформи даних у виробничих середовищах.
• Співпраця з інженерами, власниками продуктів та зацікавленими сторонами для визначення та надання надійних рішень для даних.
• Допомога у формуванні інженерних стандартів та операційних практик у міру зростання команди DataOS.

Вимоги

• 5+ років досвіду роботи в програмуванні програмного забезпечення, з сильним практичним досвідом розробки на Scala та/або Java.
• Значні знання основ Java
• Доведений досвід роботи з Spark та Kafka у виробничих середовищах.
• Досвід роботи з еkosистemoю Hadoop та платформами розподіленої обробки даних (AWS, GCP, Azure, CDP, MapR або аналогічними).
• Практичний досвід роботи з AWS, особливо з S3 та EMR/EMR Serverless (Athena є сильним плюсом).
• Досвід створення та експлуатації хмарних, високомасштабних розподілених систем.
• Сильні аналітичні та міжособистісні навички, здатність ефективно працювати в інженерних та бізнес-командах.
• Професійне володіння англійською мовою (усна та письмова форми).

Буде плюсом

• Знання Scala є плюсом.
• Досвід роботи з CI/CD-каналами та інструментами.
• Досвід роботи з еkosистemoю Hadoop та платформами розподіленої обробки даних (AWS, GCP, Azure, CDP, MapR, Databricks або аналогічними).
• Практичний досвід роботи з AWS, особливо з S3 та EMR/EMR Serverless.
• Досвід створення та експлуатації хмарних, високомасштабних розподілених систем.
• Рекомендація співробітника AppsFlyer.

Ми пропонуємо

• Медичне страхування
• Відпустку без обмежень + усі державні свята + додаткові відновлювальні дні
• Відшкодування витрат на харчування
• Відшкодування витрат на спорт
• Сніданок в офісі
• Програма психічного здоров'я
• Командні заходи, вечірки та інші командні активності
• Оплачувані дні хвороби
• Снеки, фрукти та холодне пиво
• Усі новобранці отримують новий Mac ноутбук з 2 моніторами та стартовий пакет

Про компанію

Як глобальна компанія, що працює з 25 офісів у 19 країнах, ми відображаємо людську мозаїку багатокультурного світу, в якому ми живемо. Ми забезпечуємо рівні можливості для всіх наших співробітників та сприяємо набору різноманітних талантів до наших глобальних команд без урахування раси, статі, культури чи сексуальної орієнтації. Ми цінуємо та заохочуємо цікавість, різноманітність та інновації від усіх наших співробітників, клієнтів та партнерів.

Номер посади - 2895