10698 - Engenheiro de dados Senior

Oportunidade: Engenheiro de Dados Sênior

Requisitos:

• Imprescindível experiência em Fabric.

• Domínio de:

- Modelagem de Dados (relacional e dimensional)

- SQL (performance, tuning e otimização de queries)

• Experiência com ambientes em nuvem:

- Azure / Microsoft Fabric (Lakehouse, Warehouse, Modelo Semântico)

- AWS (Glue, Lambda, S3)

• Desenvolvimento de pipelines com:

- Python

- Manipulação de dados em JSON e formatos semi-estruturados

• Experiência com ingestão e organização de dados em Data Lake:

- Camadas: Landing Zone / Raw / Trusted

- Conhecimento em infraestrutura como código: Terraform

• Conhecimento em Power BI (modelagem semântica e performance)

Desejáveis:

• Experiência sólida com ODI para construção de processos de carga no Teradata:

- Camadas: Stage, Relacional, Dimensional e Views

• Experiência com Purview (governança, catálogo e lineage)

• Conhecimento em GCP (BigQuery, Dataflow ou similares)

• Experiência com arquiteturas modernas:

- Lakehouse (Delta, Parquet, Iceberg)

• Experiência com:

- Orquestração de pipelines (Airflow, Glue Workflows, Fabric Pipelines)

- Versionamento (Git)

- Práticas de DataOps / CI-CD

• Conhecimento em:

- Monitoramento e observabilidade de pipelines o FinOps (gestão de custos em cloud)

• Perfil analítico com visão sistêmica (end-to-end) dos dados

• Senso de dono, autonomia e responsabilidade na execução

Responsabilidades principais:

• Realizar análises junto às áreas demandantes:

- Entender processos de negócio

- Mapear fluxo de dados ponta a ponta

• Participar da definição da solução técnica:

- Arquitetura de ingestão, transformação e consumo de dados

- Escolha das tecnologias mais adequadas

• Desenhar e evoluir modelos de dados:

- Estruturas dimensionais e analíticas

- Camadas de dados (DW e Data Lake)

• Desenvolver e manter pipelines de dados:

- ODI (Teradata)

- AWS (Glue, Lambda) o Fabric (pipelines modernos)

• Garantir: o Qualidade, confiabilidade e integridade dos dados

- Performance e otimização dos processos

- Governança e rastreabilidade (lineage)

• Atuar na integração entre ambientes: o On-premise (Teradata) e Cloud (AWS / Fabric / GCP)

• Apoiar times de BI e Analytics:  Disponibilização de dados para consumo (Power BI, modelos semânticos)

• Contribuir com boas práticas e evolução da plataforma de dados:

- Padronização

- Melhoria contínua

- Suporte técnico a times menos experientes

Modelo de atuação: Remoto