Engenheiro de dados
Descrição da Vaga
Vaga aberta na ST IT Cloud: Junte\-se à Nossa Equipe! A ST IT Cloud está expandindo sua equipe e queremos contar com os melhores talentos do mercado! Se você é apaixonado por tecnologia, é movido por desafios e busca um ambiente estimulante, essa vaga é para você! Engenheiro de dados pleno Local: Chácara Santo Antônio, São Paulo Modelo: Híbrido Nível: Pleno Responsabilidades: * Desenvolver e manter pipelines de dados utilizando AWS Glue, PySpark e Python; * Realizar processos de extração, transformação e carga (ETL/ELT) a partir de diferentes fontes de dados, incluindo arquivos no Amazon S3 e APIs; * Participar da migração de lógicas de transformação de MS SQL para AWS Glue; * Implementar validações de dados, tratamento de erros e logs nos jobs de Glue, garantindo qualidade e confiabilidade; * Colaborar com o time de arquitetura e engenharia para definir modelos e boas práticas de organização dos dados; * Apoiar na otimização de jobs e no controle de custos de execução no ambiente AWS; * Documentar pipelines e processos de forma clara e acessível para todo o time. Requisitos: * Experiência com AWS Glue e PySpark em projetos de transformação de dados; * Domínio em Python para automação e desenvolvimento de scripts ETL; * Conhecimento em MS SQL Server (leitura e compreensão de stored procedures e funções); * Experiência com Amazon S3 como fonte e destino de dados; * Familiaridade com boas práticas de segurança e acesso (IAM roles/policies); * **Inglês avançado para leitura e comunicação!** Desejáveis: * Experiência com AWS Lambda e Step Functions para orquestração de processos; * Noções de data warehousing, modelagem dimensional e camadas de dados (raw, staged, consumed); * Conhecimento em CloudWatch para monitoramento e logging; * Vivência com dados provenientes de sistemas SAP será um diferencial. Inreressado? Envie seu currículo para: rh@stitcloud.com, e venha fazer parte do \#teamstit
Vaga originalmente publicada em: linkedin
💼 Encontre as melhores oportunidades para desenvolvedores no Job For Dev