Engenheiro de Dados Sênior GCP/DBT

R$0.00

Vagas

Mostrar todas as fotos

Descrição

Conhecimento comprovado em DBT no minimo de 3 anos;
Domínio de:
models (staging, intermediate, marts)
ref() e source()
macros (Jinja)
seeds e snapshots
tests (not null, unique, custom)
Organização em camadas:
Staging → Transform → Mart (Data Warehouse

Google Cloud Platform (GCP):
BigQuery: Profundo conhecimento em modelagem de dados, otimização de consultas, particionamento, clustering, carga de dados (streaming e batch), segurança e governança de dados.
Cloud Storage: Experiência em gerenciamento de buckets, classes de armazenamento, políticas de ciclo de vida, controle de acesso (IAM) e segurança de dados.
Dataproc: Habilidade em provisionamento, configuração e gerenciamento de clusters Spark/Hadoop, otimização de jobs, e integração com outros serviços GCP.
Dataflow/Composer/DBT: Conhecimento em ferramentas de orquestração e processamento de dados para pipelines ELT/ETL.
Cloud IAM (Identity and Access Management): Implementação de políticas de segurança e controle de acesso granular.
VPC, Networking e Security: Entendimento de redes, sub-redes, regras de firewall e melhores práticas de segurança na nuvem.
Linguagens de Programação:
Python e PySpark: Essencial para scripts de automação, desenvolvimento de pipelines de dados e integração com APIs GCP.
SQL (avançado): Para BigQuery, DBT e transformações de dados.
Shell Scripting:

Localização

Esta é uma localização aproximada e pode não representar a posição exata. Por favor, utilize esta informação como referência e verifique a localização exata se necessário.

Endereço:

Código Postal: