EPAM logo

Big Data Software Engineer [Senior/Lead]

EPAM·Salary not specified

Primary stack

PythonAPIAWS Glue

Nice to have's

AWSKafkaKafka ConnectELK StackCassandraMongoDB

Job description

Description language:

Про посаду

Ми шукаємо досвідченого Senior/Lead Big Data Software Engineer для приєднання до нашої інноваційної команди. Ідеальний кандидат підтримає розробку стратегії, орієнтованої на клієнтів, яка спрямована на підвищення автоматизації та використання даних та аналітики протягом усіх етапів взаємодії з клієнтами. Кандидат буде відповідальним за визначення релевантних даних та використання інструментів, технологій та процесів для розробки безперервних, керованих даними та автоматизованих клієнтських комунікацій у маркетингу та обслуговуванні.

Обов'язки

  • Створення та управління ресурсами хмари AWS
  • Реалізація інтеграції та обробки даних з використанням технологій Big Data з різноманітних джерел даних, таких як RDBMS та REST HTTP API
  • Виконання трансформації та обробки даних з використанням Spark та інших хмарних сервісів для підтримки бізнес-логіки
  • Розробка та підтримка автоматизованих перевірок якості даних для забезпечення точності та цілісності даних
  • Створення інфраструктури для збору, трансформації, об'єднання та розповсюдження клієнтських даних
  • Дослідження можливостей удосконалення процесів для оптимального збору даних та генерації інсайтів
  • Забезпечення масштабованості, ефективності, точності та гнучкості рішень для даних
  • Аналіз складних наборів даних для виявлення паттернів та трендів
  • Розробка фреймворків для візуалізації даних для презентації аналітичних результатів зацікавленим сторонам
  • Активна участь у церемоніях Scrum з агільними командами
  • Розробка запитів, створення звітів та презентація результатів
  • Наставництво молодшим членам команди та просування кращих практик галузі

Вимоги

  • 5+ років досвіду в інженерії даних у сфері споживчих фінансів або суміжних галузях
  • Доведена експертиза у Python, Pyspark або технологіях AWS, включаючи Lambda, Airflow та Athena
  • Досвід роботи з інструментами Big Data, такими як HDFS, YARN, Hive, Spark, Kafka та AWS
  • Знання використання Docker, Kubernetes та Snowflake у виробничому середовищі
  • Міцний фундамент у математиці, статистиці, комп'ютерних науках, дата-науці чи подібних дисциплінах
  • Знання бізнес-аналітики, аналітичних інструментів та технік візуалізації даних
  • Відмінні організаційні навички з можливістю керувати кількома проектами та виконувати терміни
  • Ефективні комунікаційні навички для артикуляції результатів нетехнічній аудиторії
  • Постійне навчання та інтеграція нових технологій у рішення

Буде плюсом

  • Сертифікація AWS
  • Досвід роботи з Kafka Streaming та Kafka Connect
  • Знання ELK Stack
  • Досвід управління базами даних Cassandra або MongoDB

Ми пропонуємо

З нами ви можете:

  • Працювати за гнучним графіком дистанційно або з будь-якого з наших комфортних офісів або коворкінгів в Україні
  • Отримати необхідне обладнання для виконання своїх робочих завдань
  • Міняти проекти та технологічні стеки всередині EPAM
  • Набути досвіду в різних бізнес-доменах (Страхування, Електронна комерція, Охорона здоров'я, Фінанси, Подорожі, Медіа, Штучний інтелект та більше)
  • Можливості переїзду можуть бути доступними для відповідних кандидатів, залежно від ролі та вакансій в інших офісах EPAM
  • Участь у волонтерських, благодійних програмах та спільнотах (як технічних, так і за інтересами)

Ми фокусуємось на вашому професійному зростанні:

  • Ви можете планувати свій індивідуальний кар'єрний шлях разом зі своїм менеджером
  • Отримувати регулярний зворотній зв'язок від колег
  • Покращувати англійську безкоштовно з сертифікованими викладачами (Клуби розмови, курси підготовки до співбесід з клієнтами тощо)
  • Отримувати можливість проходити безкоштовне навчання та сертифікацію в хмарах AWS, GCP або Azure
  • Використовувати внутрішню програму E-learn (понад 18,200 спеціалізованих навчальних та наставницьких програм)
  • Отримувати доступ до корпоративних акаунтів на LinkedIn Learning, Get Abstract та інших партнерських ресурсах
  • Навчатися в Школі архітектури рішень EPAM з інструкторами, які є практикуючими архітекторами
  • Розвиватись як лідер, приєднуватись до школи управління доставками, управління ресурсами, основи лідерства та більше
  • Участь у внутрішніх спільнотах (понад 500 мітапів, технічних дискусій, сесій мозкового штурму, онлайн-подій та конференцій щорічно)

Відпустка та лікарняний лист (включаючи лікарняний лист без медичного сертифіката)

Широкий спектр програм добровільного медичного страхування, що надають як медичне лікування, так і різноманітні превентивні опції (включаючи спортивні заходи)

Медичне страхування для членів сім'ї за корпоративними тарифами

Підтримка компанії під час значущих життєвих подій (народження дитини або усиновлення, одруження тощо)

Підтримка психологічного комфорту: знижки на послуги від фахівців з психічного здоров'я або коучів, тематичні тренінги

Програма E-kids - безкоштовна програма навчання програмуванню для дітей EPAMers

© EPAM. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.

EPAM helps organizations innovate their business processes and rethink the way they manage their businesses so they can remain competitive in this new digital age.

More at EPAM

All 3011 roles

Popular searches