Middle+ Data Engineer

Про посаду

Компанія Dataforest шукає Middle+ Data Engineer для приєднання до захоплюючого проекту з розробки програмного забезпечення в галузі кібербезпеки. Платформа нашого клієнта пропонує Identity Insights, які забезпечують реальний час, багатоконтекстну цифрову форензику для захисту процесів відкриття нових облікових записів та виявлення підроблених облікових записів, які вже є в базі даних клієнтів.

Обов'язки

• Підтримка архітектури обробки даних за допомогою Python та PySpark, що взаємодіє з ScyllaDB та PostgreSQL.
• Робота з інфраструктурою Databricks для забезпечення надійності, масштабованості та економічної ефективності.
• Проактивне виявлення вузьких місць та пропозиція технічних удосконалень.

Вимоги

• 3+ роки практичного досвіду в інженерії даних;
• 3+ роки комерційного досвіду роботи з Python;
• Досвідчений рівень з SQL базами даних (оптимізація, моніторинг тощо);
• Досвідчений рівень з PySpark;
• Глибоке розуміння принципів ETL (архітектура/моніторинг/сповіщення/пошук та вирішення вузьких місць);
• Знайомство з інфраструктурою AWS (boto3, S3 buckets тощо);
• Досвід роботи з великими обсягами даних;
• Розуміння принципів архітектури медальйонів.

Буде плюсом

• Cassandra/Scylla
• PostgreSQL
• Pandas
• Досвід роботи з Kafka та Redis

Ми пропонуємо

• Роботу в швидкозростаючій компанії;
• Чудові можливості для налагодження зв'язків з міжнародними клієнтами, складними завданнями;
• Можливості для особистого та професійного розвитку;
• Конкурентоспроможна зарплата, виражена в USD;
• Оплачувана відпустка та лікарняні;
• Гнучкий робочий графік;
• Дружнє робочий середовище з мінімальною ієрархією;
• Колективні заходи, корпоративні події.

Про компанію

Приєднуйтесь до Dataforest та станьте частиною динамічної команди, яка формує майбутнє кібербезпеки.