Engenheiro(a) de Dados Especialista (Spark | Delta Lake | Databricks | Migração de ETLs Complexos (S

Engenheiro(a) de Dados Especialista Spark | Delta Lake | Databricks | Migração de ETLs (SAS → Spark)

Estamos em busca de um(a) Engenheiro(a) de Dados Pleno/Sênior para atuar em um projeto estratégico de modernização de dados, com foco na migração de processos SAS para Databricks e na construção de pipelines robustos, escaláveis e performáticos.

Se você possui sólida experiência com Spark, arquitetura moderna de dados e gosta de atuar em ambientes desafiadores e de alto impacto, essa oportunidade é para você.

Informações adicionais

Modelo de atuação: Híbrido – idas esporádicas ao escritório até 2 dias na semana

(Zona Sul de SP – região da Berrini)

Modelo de contratação: PJ

Necessário possuir equipamento próprio

️

Requisitos Técnicos

Espanhol Avançado/Fluente

Processamento de Dados

Experiência avançada com Apache Spark

Conhecimento sólido em Delta Lake

Vivência prática com Databricks

Orquestração

Criação e gestão de Jobs, Tasks e parametrizações

Experiência com Delta Live Tables (DLT)

Integração com Airflow ou APEX

Desenvolvimento e Governança

Versionamento com Git

Gestão de ambientes (dev, homologação e produção)

Experiência com DBX (desejável)

Operação e Performance

Monitoramento de logs e métricas

Otimização de custos no Databricks

Estratégias de particionamento e otimização de arquivos

Principais Responsabilidades

Migrar ETLs complexos de SAS para Databricks (Spark)

Traduzir códigos PROC SQL e Macros SAS para notebooks e jobs em Spark

Integrar dados provenientes de múltiplas fontes

Desenvolver pipelines escaláveis, automatizados e resilientes

Estruturar modelos de dados compatíveis com Data Cloud

Garantir qualidade, governança e segurança dos dados

Atuar na ativação de dados para Marketing, IA e personalização

Monitorar performance, custos e disponibilidade dos ambientes

Colaborar com times multidisciplinares (dados, negócio, marketing e tecnologia)

Interessados (as) dentro do perfil enviar CV com pretensão salarial