GFT Poland logo

Engenharia de Dados Sênior (Azure)

GFT Poland·Salary not specified

Primary stack

PythonSQLAzureAirflowDatabricksGitunittestpytestSQL ServerREST

Nice to have's

DevOpsCI/CDDatabricksAzure

Job description

About the Position

Engenharia de Dados Sênior (Azure) | Híbrido/SP - 136209

Estamos à procura de um(a) Engenheiro(a) de Dados Sênior com sólida experiência em arquitetura e engenharia de dados em ambientes cloud, capaz de desenvolver e sustentar pipelines escaláveis, confiáveis e observáveis. O profissional atuará na construção e evolução de plataformas de dados utilizando arquitetura Lakehouse, além de contribuir para governança, qualidade, integração e disponibilização de dados para iniciativas analíticas e de negócio.

Responsibilities

  • Projetar, desenvolver e manter pipelines de dados batch e streaming com foco em escalabilidade, performance e Observabilidade;
  • Implementar processos de ingestão, transformação e disponibilização de dados utilizando Python, PySpark, Spark e SQL;
  • Construir e evoluir camadas de dados em arquitetura Lakehouse (Bronze, Silver e Gold);
  • Desenvolver e sustentar fluxos de ETL/ELT em ambientes cloud;
  • Implementar e manter processos de orquestração de pipelines de dados;
  • Atuar na análise, diagnóstico e resolução de problemas em pipelines e aplicações de dados;
  • Realizar otimização de performance e correção de incidentes em soluções de dados;
  • Implementar políticas, processos e ferramentas de governança de dados, promovendo padronização e responsabilização sobre os dados;
  • Utilizar e evoluir soluções baseadas em Azure Data Factory, Airflow, Databricks e Data Lake;
  • Desenvolver integrações entre sistemas por meio de APIs REST e outras fontes de dados;
  • Aplicar boas práticas de modelagem de dados para Data Lakes e ambientes analíticos;
  • Colaborar com áreas de produto, engenharia, dados e negócio na definição e implementação de soluções técnicas;
  • Garantir qualidade, consistência, rastreabilidade e reutilização dos ativos de dados;
  • Atuar de forma proativa na sustentação e evolução da plataforma de dados.

Requirements

  • Experiência prévia como Engenheiro(a) de Dados;
  • Experiência sólida com Python, PySpark e SQL;
  • Conhecimento avançado em Azure Data Factory, Airflow, Databricks e Data Lake;
  • Experiência em arquitetura de dados e construção de soluções analíticas;
  • Vivência com Git Flow e controle de versionamento;
  • Conhecimento em testes unitários e funcionais (Unittest, Pytest ou similares);
  • Experiência com bancos de dados relacionais como SQL Server, Oracle ou equivalentes;
  • Experiência na implementação e sustentação de processos ETL/ELT;
  • Conhecimento em modelagem de dados para Data Lakes e arquitetura Lakehouse;
  • Experiência com camadas Bronze, Silver e Gold ou estruturas equivalentes;
  • Vivência na integração e consumo de APIs REST;
  • Experiência prática em ambientes Cloud, com foco em Azure;
  • Experiência com processamento de dados em batch e streaming;
  • Conhecimento em ferramentas de streaming de dados, como Kafka;
  • Capacidade de atuar em ambientes dinâmicos, com múltiplas demandas e gestão de prioridades simultâneas.

Nice to Have

  • Certificações Databricks e/ou Microsoft Azure;
  • Experiência com arquitetura orientada a eventos e soluções baseadas em streaming;
  • Conhecimento em segurança e privacidade de dados;
  • Experiência em ambientes de alta criticidade e grande volume de processamento;
  • Conhecimento em práticas DevOps e implementação de pipelines CI/CD para projetos de dados;
  • Vivência com ferramentas de Observabilidade, monitoramento, qualidade e lineage de dados.

Behavioral Description

Procuramos uma pessoa que:

  • Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
  • Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento;
  • Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
  • Tenha habilidades de resolução de problemas;
  • Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
  • Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.

We Offer

  • Cartão multi-benefícios – você escolhe como e onde utilizar.
  • Bolsas de Estudos para cursos de Graduação, Pós, MBA e Idiomas.
  • Programas de incentivo à Certificações.
  • Horário de trabalho flexível.
  • Salários competitivos.
  • Avaliação de desempenho anual com plano de carreira estruturado.
  • Possibilidade de carreira internacional.
  • Wellhub e TotalPass.
  • Previdência Privada.
  • Auxílio-Creche.
  • Assistência Médica.
  • Assistência Odontológica.
  • Seguro de Vida.

About the Company

Com mais de 35 anos de mercado e localizada em 16 países, a GFT emprega mais de 12.000 pessoas ao redor do mundo sendo 4.000 pessoas no Brasil.

Aqui, a diversidade, a igualdade e a inclusão estão no centro e garantir um ambiente de trabalho seguro para todas as pessoas faz parte de quem somos.

Promovemos uma cultura de desenvolvimento e crescimento pautada no nosso pilar de Continuous Scaled Learning porque acreditamos que o uso inteligente da tecnologia é a chave para o sucesso nesse mundo digital.

#VemPraGFT

#VamosVoarJuntos

#ProudToBeGFT

© GFT Poland. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.

The GFT Group is a global technology partner for future digital issues — from discovering innovation to developing and implementing sustainable business models. Within Group, GFT Poland (previously Rule Financial) is the provider of IT solutions to the global investment banking community.We work for 9 of 10 top investment banks of Wall Street and City of London.As part of GFT Group, we employ more than 3000 people in 11 countries, including 2 Polish offices located in Lodz and Poznan, where we employ 600 people.We offer challenging work in complex IT projects, using high frequency trading and best practices to deliver high quality software.We offer an opportunity to work in IT international projects for software developers and testers, application support engineers, project managers and business analysts. We are working with various technologies like Java, .NET, JavaScript, TDD, Oracle, ETL, Informatica and many more.

More at GFT Poland

All 424 roles

Popular searches