Engenheiro de dados sênior
Descrição da Vaga
Descrição: Requisitos básicos: * Experiência comprovada como engenheiro de dados em projetos de evolução e aplicações de grande complexidade. * Formação técnica e experiência profissional com viés quantitativo/analítico. * Desejável: ter liderado outros desenvolvedores. * Experiência atuando em projetos de dados com métodos ágeis (Scrum, Kanban). Requisitos obrigatórios: * Domínio em Python, SQL e POO (Programação Orientada a Objetos); * Conhecimentos e experiência na implementação e suporte de data lakes e/ou data warehouses no GCP; * Conhecimentos e experiência atuando com serviços GCP como Cloud Storage, BigQuery, Dataproc, CloudRun, Pub/Sub, Dataplex; * Conhecimento na orquestração de pipelines usando Airflow; * Conhecimento prático com Terraform e CI/CD. O que você irá fazer: * Desenhar, construir e estruturar modelos de dados escaláveis, visando atender as necessidades mapeadas; * Construção de pipelines de dados de ponta\-a\-ponta, desde o mapeamento das fontes de dados de origem, processamento e transformações, até a entrega final; * Correções e melhorias em pipelines de dados existentes; * Automação de fluxos de processamento de de dados, seja em batch ou streaming; * Integração com provedores externos de dados, organização e disponibilização desses dados para consumo; * Criação de rotinas para monitoramento dos pipelines de dados. 2511240202461590732
Vaga originalmente publicada em: indeed
💼 Encontre as melhores oportunidades para desenvolvedores no Job For Dev