Job Description, Responsibilities & Requirements
Description language:
Про посаду
Ми шукаємо висококваліфікованого Senior Data Engineer, щоб розробляти, створювати та підтримувати надійні рішення для обробки даних для наших бізнес-потреб. Ідеальний кандидат матиме досвід у технологіях інженерії даних, сильний досвід кодування та чудові комунікаційні навички для безпосередньої співпраці з клієнтами.
Ця посада вимагає роботи з різними часовими зонами та можливих пізніх зустрічей з офісною командою до 10 ранку за тихоокеанським часом.
Обов'язки
- Проектування та підтримка ETL/ELT трубопроводів, пакетної/мікро-пакетної обробки та систем потокової передачі даних
- Створення та оптимізація інфраструктури для витягнення, перетворення та завантаження даних з використанням таких інструментів, як ADF, Spark та Kafka
- Виявлення та впровадження внутрішніх процесів для підвищення масштабованості та продуктивності
- Проектування та впровадження інноваційних рішень для даних, що включають Spring Boot, ReactJS та NoSQL, де це необхідно
- Виступати в якості єдиного центру відповідальності за питання, пов'язані з доставкою, включаючи ескалацію та технічне керівництво
- Керувати технічним проектуванням для забезпечення надійної, масштабованої архітектури, що відповідає стандартам якості
- Координувати роботу між різними дисциплінами та зацікавленими сторонами для забезпечення безперебійної доставки
- Забезпечувати дотримання процесів клієнтів, методологій та гнучких робочих процесів
- Розробляти стратегії управління ризиками протягом життєвого циклу доставки
- Просувати стратегії для підвищення продуктивності та ефективності доставки
- Надавати підтримку Data Engineers, надаючи технічне консультування та керівництво
- Керувати розгортанням та підтримкою виробництва для впроваджених рішень
Вимоги
- 5+ років досвіду роботи з SQL, Spark та Scala
- Знання Databricks та Spark Streaming технологій
- Знання Kafka для потокової обробки та інтеграційних трубопроводів даних
- Навички у використанні Azure для рішень даних та керування хмарою
- Сильні комунікаційні навички з професійним рівнем англійської мови, що дозволяє безпосередньо спілкуватися з клієнтами
Буде плюсом
- Знання екосистеми Azure для розширених рішень для великих даних
- Розуміння інноваційних рішень для великих даних для персоналізованих клієнтських досвідів
Ми пропонуємо
- Можливість працювати дистанційно з Львова, Україна
- Захоплююча роль у провідній технологічній компанії, EPAM Systems
- Конкурентоспроможні умови контракту
Про компанію
EPAM Systems є глобальною компанією з інженерії програмного забезпечення та розробки продуктів, що надає цифрову трансформацію та технологічні інновації провідним організаціям у світі.