Luxoft logo

Senior Data Engineer

Luxoft·Salary not specified

Primary stack

PythonBashWindowsETLVaultAzureDelta LakeSQL

Nice to have's

Elasticsearchcontainerization and orchestration technologiesDockerKubernetesPerformance TuningCollaboration and CommunicationComputer Science and data science academic and education credentials

Job description

Description language:

Про посаду

Ми шукаємо Senior Data Engineer з більш ніж 8 роками досвіду для приєднання до нашої команди в Remote Ukraine. Посада зосереджена на створенні масштабовних рішень для даних для великого американського роздрібного підприємства.

Обов'язки

  • Розробка та впровадження даних моделей, включаючи концептуальні, логічні та фізичні моделі даних.
  • Розробка надійних та масштабовних ETL/ELT трубопроводів.
  • Інтеграція даних з різних джерел з використанням відповідних методів.
  • Розробка та впровадження рішень для сховищ даних.
  • Виконання складних запитів, перетворень даних та налаштування продуктивності на хмарних сховищах даних.
  • Інтеграція метаданих та процесів управління в хмарні платформи для даних.
  • Керівництво багатофункціональними інженерними командами та визначення технічної стратегії та архітектури.

Вимоги

  • Обов'язково

    • Готовність працювати до 20:00 за центральноєвропейським часом (без необхідності робити понаднормовий час)
    • Загальний досвід роботи не менше 8+ років (щонайменше 1 рік на посаді Архітектора)
    • Сильний, недавній досвід роботи з Azure Data Factory та Synapse (3+ роки)
    • Глибокі знання Microsoft Azure, включаючи Azure Data Lake Storage, Azure Synapse Analytics, Azure Data Factory та Azure Databricks, pySpark
    • Великий досвід у створенні надійних та масштабовних ETL/ELT трубопроводів
    • Здатність інтегрувати дані з різних джерел, включаючи бази даних, API та зовнішніх постачальників даних
    • Досвід у проектуванні та впровадженні рішень для сховищ даних (дименсіональне моделювання, зірчасті схеми, Data Mesh, Data/Delta Lakehouse, Data Vault)
    • Досвід у використанні SQL для складних запитів, перетворень даних та налаштування продуктивності
    • Досвід інтеграції метаданих та процесів управління в хмарні платформи для даних
    • Сертифікація в Azure, Databricks або інших відповідних технологіях є додатковою перевагою
    • Досвід роботи з хмарними аналітичними базами даних
    • Досвід роботи з Azure MI, Azure Database for Postgres, Azure Cosmos DB, Azure Analysis Services та Informix
    • Досвід роботи з Python та Python-заснованими інструментами ETL
    • Досвід роботи зі скриптами оболонки в Bash, Unix або Windows
    • Доведена здатність керувати багатофункціональними інженерними командами, визначати технічну стратегію та архітектуру, забезпечувати реалізацію складних платформ для даних, надавати менторство інженерам та ефективно спілкуватися зі стейкхолдерами на всіх рівнях організації.
  • Буде плюсом

    • Досвід роботи з Elasticsearch
    • Знання контейнеризації та оркестраційних технологій (Docker, Kubernetes)
    • Налагодження та налаштування продуктивності: здатність виявляти та вирішувати вузькі місця в процесах обробки даних та оптимізації трубопроводів для ефективного завантаження та аналізу даних
    • Співпраця та комунікація: сильні міжособистісні навички для ефективної співпраці зі стейкхолдерами, інженерами даних, науковцями-дата-сайентистами та іншими багатофункціональними командами
    • Здатність планувати, оцінювати та відстежувати прогрес реалізації функцій
    • Академічні та освітні кваліфікації в галузі комп'ютерних наук та дата-сайєнс

Ми пропонуємо

  • Можливість працювати дистанційно з України
  • Конкурентоспроможна зарплата та переваги
  • Колаборативне та інноваційне робоче середовище

Про компанію

Luxoft є глобальним постачальником послуг з цифрової трансформації та технологій, що дозволяє підприємствам процвітати в цифрову епоху. Ми прагнемо надавати інноваційні рішення та сприяти культурі досконалості та постійного навчання.

Мови

  • Англійська: B2 Upper Intermediate

Подати заявку

Зацікавлені кандидати можуть подати заявку на посаду Senior Data Engineer в Remote Ukraine.

© Luxoft. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.

A provider of software development services and innovative IT solutions with a worldwide customer base consisting mainly of large multinational corporations.

More at Luxoft

All 785 roles

Popular searches