Engenheiro de Dados GCP/Airflow - PL/SR

**O que procuramos?** Estamos em busca de um Engenheiro de Dados Sênior para protagonizar a construção e evolução da nossa plataforma de dados. Você será responsável por projetar arquiteturas de dados robustas, escaláveis e resilientes, garantindo que a informação flua com qualidade desde a origem até o consumo final. O foco principal será a construção de pipelines complexos utilizando o Apache Airflow (via Cloud Composer) e a otimização de grandes volumes de dados dentro do BigQuery, servindo de base para análises estratégicas e modelos de Machine Learning. **Atribuições principais:** Arquitetura de Dados: Desenvolver e manter arquiteturas de Lakehouse/Data Warehouse escaláveis no Google Cloud. Orquestração de Pipelines: Desenvolver, monitorar e otimizar DAGs complexas no Apache Airflow, garantindo a eficiência do agendamento e a gestão de dependências. Desenvolvimento ETL/ELT: Criar processos de ingestão e transformação de dados em larga escala (batch e streaming) utilizando Python, SQL e Dataflow (Apache Beam). Modelagem de Dados: Aplicar técnicas de modelagem (como Kimball ou Data Vault) para estruturar camadas de dados (Raw, Trusted, Refined) no BigQuery. Qualidade e Governança: Implementar frameworks de Data Quality e monitoramento de pipelines para garantir a integridade e confiabilidade dos dados. FinOps de Dados: Otimizar consultas e armazenamento no BigQuery para garantir o melhor equilíbrio entre performance e custo. Liderança Técnica: Atuar como referência para o time, revisando códigos (Pull Requests) e definindo padrões de engenharia. **Requisitos:** * Graduação em Engenharia de Dados, Ciência da Computação, Engenharia de Software ou áreas correlatas * Experiência sólida em engenharia de dados e modelagem analítica * Domínio avançado de DBT (Data Build Tool) para transformação e modelagem de dados * Conhecimento sólido de Google Cloud Platform (GCP); BigQuery (Particionamento, Clustering, Slots); Cloud Storage; Cloud Functions e Pub/Sub * Experiência em construção e implementação de Data Warehouse e Data Lake * Experiência profunda com Apache Airflow (Custom Operators, Hooks, Sensors e otimização de recursos) * Conhecimento em Spark (Dataproc) ou Apache Beam (Dataflow) * Experiência com SQL avançado, Python e linguagens de programação para dados * Experiência em pipeline de dados (ETL/ELT) e orquestração de workflows * Domínio de ferramentas de versionamento de dados e CI/CD para analytics (Cloud Build, GitHub Actions ou GitLab CI) * Conhecimento em governança de dados, segurança e compliance * Experiência com testes de performance e otimização de consultas * Conhecimento de metodologias ágeis aplicadas a projetos de dados **Diferenciais:** * Certificação: Google Professional Data Engineer. * Engenharia de Analytics: Experiência com dbt (data build tool) integrado ao BigQuery. * Data Governance: Conhecimento em ferramentas como Dataplex ou Collibra. * Streaming: Experiência com arquiteturas orientadas a eventos em tempo real. * Observabilidade: Implementação de alertas e dashboards de saúde dos dados (SLA/SLO de dados). **Localidade da posição: Remota** **Por que construir sua carreira na Meta?** Oferecemos autonomia, metas claras e um ambiente dinâmico e desafiador, onde os profissionais têm oportunidade de interagir com diferentes tecnologias, participar de todos os tipos de projetos, trazer novas ideias e trabalhar de qualquer lugar do Brasil e (por que não?) do mundo. Além disso, somos uma das melhores empresas para se trabalhar no Brasil segundo o Great Place to Work e uma das 10 empresas que mais crescem no país há 3 anos consecutivos, segundo o Anuário Informática Hoje. **Quais são nossos valores?** * Somos pessoas servindo pessoas * Pensamos e agimos como donos * Temos gana por performance * Crescemos e aprendemos juntos * Buscamos excelência e a simplicidade * Temos inovação e criatividade no nosso DNA Todas as pessoas são bem\-vindas independentemente de sua condição, deficiência, etnia, crença religiosa, orientação sexual, aparência, idade ou afins. Queremos que você cresça conosco em um ambiente acolhedor e repleto de oportunidades. Se identificou? Então, \#VemSerMeta!