N-iX logo

Senior Data Engineer

N-iX·Salary not specified

Primary stack

PythonTypeScriptSQL

Nice to have's

Palantir FoundryApache HadoopSparkKafkaBigQueryAWS GlueAzure Data FactoryGoogle Cloud DataflowDockerKubernetes

Job description

Description language:

Про посаду

Ми шукаємо проактивного Senior Data Engineer, щоб приєднатися до нашої енергійної команди. Як Senior Data Engineer, ви відіграватимете ключову роль у проектуванні, розробці та підтримці складних дата-піпайнів, Ontology Objects та Foundry Functions у Palantir Foundry. Ідеальний кандидат матиме міцний досвід у хмарних технологіях, архітектурі даних та пристрасть до вирішення складних задач з даними.

Обов'язки

  • Співпраця з крос-функціональними командами для розуміння вимог до даних, проектування, впровадження та підтримки масштабованих дата-піпайнів у Palantir Foundry, забезпечуючи цілісність даних від початку до кінця та оптимізацію робочих процесів.
  • Збір та переклад вимог до даних у надійні та ефективні рішення, використовуючи ваш досвід у хмарному інженерії даних. Створення дата-моделей, схем та діаграм потоку для керівництва розробкою.
  • Розробка, впровадження, оптимізація та підтримка ефективних та надійних дата-піпайнів та процесів ETL/ELT для збору, обробки та інтеграції даних для забезпечення своєчасної та точної доставки даних до різних бізнес-додатків, впроваджуючи кращі практики управління даними та безпеки для захисту конфіденційної інформації.
  • Моніторинг продуктивності дата-піпайнів, виявлення вузьких місць та впровадження покращень для оптимізації швидкості обробки даних та зменшення латентності.
  • Виявлення та усунення проблем, пов'язаних з дата-піпайнами, забезпечуючи постійну доступність та надійність даних для підтримки процесів прийняття рішень на основі даних.
  • Зберігання курсу на новітні технології та тенденції галузі, впровадження інноваційних рішень у практики інженерії даних, а також ефективне документування та комунікація технічних рішень та процесів.

Вимоги

  • 5+ років досвіду в інженерії даних, бажано у фармацевтичній або біомедичній галузі;
  • Значний досвід у Python та PySpark;
  • Досвід роботи з технологіями великих даних (наприклад, Apache Hadoop, Spark, Kafka, BigQuery тощо);
  • Практичний досвід роботи з хмарними сервісами (наприклад, AWS Glue, Azure Data Factory, Google Cloud Dataflow);
  • Знання моделювання даних, дата-варахаусінгу та концепцій ETL/ELT;
  • Практичний досвід роботи з системами баз даних (наприклад, PostgreSQL, MySQL, NoSQL тощо);
  • Знання технологій контейнеризації (наприклад, Docker, Kubernetes);
  • Ефективні навички вирішення проблем та аналітичні здібності, поєднані з відмінними комунікаційними та коопераційними здібностями;
  • Сильні комунікаційні та командні здібності;
  • Розуміння кращих практик безпеки та конфіденційності даних;
  • Сильні математичні, статистичні та алгоритмічні навички.

Буде плюсом

  • Сертифікація на хмарних платформах або суміжних областях;
  • Досвід роботи з пошуковою системою Apache Lucene, Webservice Rest API;
  • Знання Veeva CRM, Reltio, SAP та/або Palantir Foundry;
  • Знання нормативних вимог фармацевтичної галузі, таких як закони про конфіденційність даних, є перевагою;
  • Попередній досвід роботи з JavaScript та TypeScript.

Ми пропонуємо

  • Гнучний робочий формат - віддалено, в офісі або гнучко
  • Конкурентоспроможна зарплата та хороший компенсаційний пакет
  • Персоналізований кар'єрний ріст
  • Інструменти для професійного розвитку (програма наставництва, технічні лекції та тренінги, центри досконалості тощо)
  • Активні технічні спільноти з регулярним обміном знаннями
  • Компенсація витрат на освіту
  • Пам'ятні подарунки до ювілеїв
  • Корпоративні заходи та командоутворення
  • Інші місцеві переваги

не застосовується до фрілансерів

Про компанію

Ми є глобальною біофармацевтичною компанією, яка прагне покращувати здоров'я та добробут за допомогою інноваційних рішень.

© N-iX. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.

N-iX is a Ukraine and Poland based provider of software development outsourcing services, game development and professional services with 1700+ technical experts.

More at N-iX

All 71 roles

Similar jobs

Popular searches