Data engineer
Primary stack
SQLPythonETLSnowflakeAWSAzureGitFlaskSQLAlchemyPandas
Nice to have's
Redshift
Job description
Description language:
Про посаду
Ми шукаємо кваліфікованого Data Engineer для приєднання до нашої команди. Володіння SQL, Python та технологіями сховищ даних є обов'язковою умовою для цієї посади. Ідеальним кандидатом буде той, хто має досвід роботи в MedAnalytics або Vizikveyte.
Обов'язки
- Розробка та впровадження ETL/ELT-піплайнів
- Управління рішеннями для сховищ даних за допомогою Snowflake та/або BigQuery
- Розробка та підтримка робочих процесів обробки даних
- Забезпечення якості даних за допомогою перевірки кількості рядків та відображення схем
- Впровадження безпечних потоків аутентифікації за допомогою OAuth 2.0 та OpenID Connect
- Оптимізація та управління базами даних, включаючи PostgreSQL, Oracle та SQL Server
- Використання хмарних сервісів, таких як AWS та Azure, для зберігання та обробки даних
- Налаштування та управління піплайнами CI/CD для безперебійних розгортань
- Співпраця з крос-функціональними командами для забезпечення цілісності та доступності даних
Вимоги
- Володіння SQL, Python та Data Warehousing
- Досвід роботи з ETL-процесами та інструментами
- Знання Snowflake, BigQuery, AWS та Azure
- Знання Git для контролю версій
- Досвід роботи з Flask, SQLAlchemy, pandas, openpyxl, APScheduler, psutil, PyYAML, Oracle Instant Client, Python 3.11, Gunicorn, Podman / Docker та Kubernetes
- Глибоке розуміння PostgreSQL, Oracle та SQL Server
- Досвід роботи з BigQuery, Google Cloud Storage та Secret Manager
- Знання Docker / Podman, піплайнів CI/CD та управління середовищем змінними та секретами
- Знання концепцій розподілених систем, проектування піплайнів ETL/ELT, обробки даних частинами, відображення схем та перевірки кількості рядків
- Досвід роботи з OAuth 2.0, OpenID Connect, контролем доступу на основі ролей та безпечним управлінням обліковимиданими
Буде плюсом
- Досвід роботи з Redshift, data factory та Synapse
- Знання багатопотоковості, планування фонових завдань, структурованого логування, надійного обробника помилок та міграції баз даних
Ми пропонуємо
- Конкурентоспроможну зарплату
- Можливість працювати в Києві, Берліні або віддалено
- Гібридний тип робочого місця
- Професійний ріст та розвиток
Про компанію
Приєднуйтесь до нашої інноваційної команди та сприяйте розробці проектів з передової інженерії даних.
© TechHunt. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.
TechHunt
IT / tech за описом ITJobs