GFT Poland logo

Engenharia de Dados Sênior

GFT Poland·Salary not specified

Primary stack

dbtPythonAirflowGitSQL

Nice to have's

Infra como códigoAWSFormatos de tabela abertosStreaming / CDCFerramentas de qualidade e catálogoCamada semântica e ferramentas de BI

Job description

About the Position

Engenharia de Dados Sênior | Híbrido/SP - 136504

Estamos à procura de um(a) Engenheiro(a) de Dados Sênior para atuar com desenvolvimento e arquitetura de plataformas de dados. A posição envolve a construção e operação de pipelines, bem como a responsabilidade arquitetural sobre a plataforma, incluindo modelagem de data Lake, padrões de ingestão, governança de camadas e otimização de performance e custo. É essencial a execução técnica, com foco na confiabilidade dos dados que suportam painéis executivos, relatórios e obrigações regulatórias em um ambiente regulado, exigindo rastreabilidade e reprodutibilidade.

Responsibilities

  • Saber trabalhar na estrutura de hub-spoke
  • Projetar, construir e manter pipelines de ingestão e transformação orquestrados em Apache Airflow, com padrões consistentes de retry, idempotência, alerta e SLA.
  • Desenvolver e evoluir modelos de transformação em dbt sobre o data warehouse, organizando as camadas (staging → intermediate → marts) com testes e documentação.
  • Implementar ingestões de fontes heterogêneas: bancos transacionais, APIs de terceiros (custodiantes, distribuidores, provedores de mercado), arquivos regulatórios e planilhas operacionais.
  • Instrumentar observabilidade dos dados: freshness, volumetria, quebras de contrato, reconciliação entre origem e destino.
  • Definir e defender o modelo de dados do warehouse (dimensional, Data Vault ou híbrido - com justificativa), incluindo chaves, granularidade, historização (SCD) e tratamento de correções retroativas.
  • Estabelecer padrões de distribuição, ordenação e particionamento no MPP (DISTKEY, SORTKEY, compressão em Redshift; equivalentes em outras engines) e garantir que sejam seguidos.
  • Fazer o desenho de camadas e contratos de dados entre times: o que é fonte da verdade, quem pode escrever onde, o que é exposto para BI e o que é interno.
  • Conduzir tuning de performance e custo: análise de planos, filas/WLM, concorrência, manutenção (VACUUM/ANALYZE ou equivalente), rewrite de queries e materializações.
  • Avaliar e recomendar tecnologias (formatos de tabela, lakehouse, streaming, catálogo, ferramentas de qualidade) com análise de trade-off explícita, incluindo custo e custo de saída.
  • Trabalhar com dados vetorizados
  • Implementar controles de qualidade automatizados e reconciliações que sustentem números usados em relatórios a clientes e em respostas a reguladores.
  • Garantir linhagem e rastreabilidade ponta a ponta: de um número no painel até a origem e a versão do código que o produziu.
  • Aplicar controles de acesso, segregação por sensibilidade e conformidade com LGPD e com as normas aplicáveis ao setor (CVM, BACEN, BSM, políticas internas de compliance).
  • Documentar decisões arquiteturais (ADRs) e manter o dicionário de dados vivo.
  • Atuar como referência técnica para engenheiros(as) pleno e júnior: code review, pareamento, definição de padrões e mentoria.
  • Traduzir demandas de negócio (Wealth Management, Comercial, Risco, Compliance, Operações) em desenho de dados sustentável - inclusive dizendo "não" a atalhos que criam dívida.
  • Participar do planejamento técnico e estimar com honestidade escopo, risco e prazo.

Requirements

  • Experiencia comprovada em engenharia de dados com responsabilidade arquitetural (saber desenhar o modelo, não só implementar de outra pessoa).
  • Histórico comprovado de ter levado ao ar e operado em produção uma plataforma de dados analítica - com incidentes, plantão e consequências reais.
  • SQL avançado de verdade: window functions, CTEs recursivas, leitura de plano de execução, diagnóstico de skew e de spill em disco.
  • Python para engenharia de dados: código modular, testável e versionado (não apenas notebooks).
  • Familiaridade com pandas/polars, tipagem e testes automatizados.
  • Apache Airflow em produção: autoria de DAGs, sensores, backfill, gestão de dependências e de falhas.
  • Data warehouse MPP em nuvem - Redshift preferencialmente; Snowflake, BigQuery ou Databricks são aceitos com disposição para se aprofundar em Redshift.
  • DBT ou ferramenta equivalente de transformação versionada, com testes.
  • Modelagem dimensional (Kimball) com domínio real: fato vs. dimensão, granularidade, SCD tipos 1/2, tabelas ponte, snapshots.
  • Git e cultura de code review; CI/CD aplicado a dados.
  • Modelagem e diagnóstico de performance: saber explicar por que uma query está lenta e provar a correção com números antes e depois.
  • Rigor com correção numérica.
  • Comunicação escrita clara/documentação.
  • Autonomia para investigar do dashboard até a origem sem pedir permissão a cada passo.
  • Disponibilidade de atuação hibrida 2 a 3x presencial - Região Vila Olimpia

Nice to Have

  • Experiência no mercado financeiro: investimentos, wealth management, custódia, renda fixa/variável, fundos, cálculo de rentabilidade (TIR/TWR), posição e movimentação.
  • Vivência com dados regulatórios: CVM, BACEN, BSM, ANBIMA - inclusive prazos e formatos de entrega.
  • Infra como código (Terraform), AWS (S3, Glue, Lambda, IAM, Step Functions).
  • Formatos de tabela abertos (Iceberg, Delta) e arquitetura lakehouse.
  • Streaming / CDC (Kafka, Debezium, Kinesis).
  • Ferramentas de qualidade e catálogo (Great Expectations, Soda, DataHub, OpenMetadata).
  • Experiência com camada semântica e ferramentas de BI (Power BI, Metabase, Looker).
  • Ter conduzido uma migração relevante (legado → moderno, on-prem → nuvem, ou planilha/VBA → pipeline versionado) com validação de paridade.

We Offer

  • Cartão multi-benefícios – você escolhe como e onde utilizar.
  • Bolsas de Estudos para cursos de Graduação, Pós, MBA e Idiomas.
  • Programas de incentivo à Certificações.
  • Horário de trabalho flexível.
  • Salários competitivos.
  • Avaliação de desempenho anual com plano de carreira estruturado.
  • Possibilidade de carreira internacional.
  • Wellhub e TotalPass.
  • Previdência Privada.
  • Auxílio-Creche.
  • Assistência Médica.
  • Assistência Odontológica.
  • Seguro de Vida.

About the Company

Com mais de 35 anos de mercado e localizada em 16 países, a GFT emprega mais de 12.000 pessoas ao redor do mundo sendo 4.000 pessoas no Brasil.

Aqui, a diversidade, a igualdade e a inclusão estão no centro e garantir um ambiente de trabalho seguro para todas as pessoas faz parte de quem somos.

Promovemos uma cultura de desenvolvimento e crescimento pautada no nosso pilar de Continuous Scaled Learning porque acreditamos que o uso inteligente da tecnologia é a chave para o sucesso nesse mundo digital.

#VempraGFT

#LetsGoBeyond

#ProudToBeGFT

© GFT Poland. This job description was sourced from the employer's public career page. TheJob is not the employer — we index the posting and route candidates to the source. All content rights and hiring decisions belong to the employer.

The GFT Group is a global technology partner for future digital issues — from discovering innovation to developing and implementing sustainable business models. Within Group, GFT Poland (previously Rule Financial) is the provider of IT solutions to the global investment banking community.We work for 9 of 10 top investment banks of Wall Street and City of London.As part of GFT Group, we employ more than 3000 people in 11 countries, including 2 Polish offices located in Lodz and Poznan, where we employ 600 people.We offer challenging work in complex IT projects, using high frequency trading and best practices to deliver high quality software.We offer an opportunity to work in IT international projects for software developers and testers, application support engineers, project managers and business analysts. We are working with various technologies like Java, .NET, JavaScript, TDD, Oracle, ETL, Informatica and many more.

More at GFT Poland

All 553 roles

Popular searches