Data Engineer (Pleno/Sênior)

Empresa confidencial

🏢 remoto🎯 senior💰 USD 6.000 a 7.500/mês
A empresa atua no setor de Gambling e busca um(a) Data Engineer com forte experiência em pipelines de dados em produção, infraestrutura AWS e práticas modernas de engenharia. É uma oportunidade internacional, 100% remota, com alto nível técnico e autonomia. Responsabilidades: - Construir e manter pipelines de dados end-to-end (landing → transformação → analytics). - Desenvolver ETLs nativos em AWS Glue, S3 e Iceberg. - Provisionar e gerenciar infraestrutura de pipelines usando Terraform. - Empacotar e distribuir lógica Python como .whl via - extra-py-files no Glue. - Implementar e manter CI/CD para infraestrutura e artefatos de código (GitHub Actions). - Garantir instrumentação completa: alertas, monitoramento, lineage e validação. - Evoluir tabelas de métricas e fatos com consistência, atomicidade e reprocessamento controlado. O que você vai trabalhar: - Pipeline gold-layer com leitura de métricas Iceberg por cliente, cálculo de somas, compostos e ratios. - Manutenção de tabela reporting_metric_fact com status OK/ERR, auditoria, reprocessamento em cascata e commits atômicos.

Requisitos

  • 5+ anos de experiência como Data Engineer
  • Experiência sólida em pipelines de produção usando S3, AWS Glue, Iceberg
  • Forte domínio de AWS-native ETL
  • Experiência com Terraform para provisionamento de pipelines
  • Experiência com empacotamento Python em .whl para Glue
  • Vivência com CI/CD (GitHub Actions)
  • Proficiência em instrumentação de sistemas (alertas, monitoramento, lineage)
  • Inglês avançado (C1) — comunicação escrita e falada

Diferenciais

  • Experiência prévia em startups
  • Formação em Computer Engineering, Computer Science ou áreas correlatas