Engenheiro de dados - AWS

**Description:** ---------------- Na Venice, usamos a tecnologia e a inovação para transformar desafios em soluções digitais eficientes. Buscamos profissionais que queiram impactar o futuro com criatividade, explorando novas possibilidades e contribuindo para projetos que fazem a diferença. Se você é curioso, proativo e gosta de desafios, essa pode ser a oportunidade ideal para crescer e evoluir com a gente! **O Engenheiro de dados \- AWS é responsável por:** * Projetar e implementar pipelines de dados escaláveis em AWS Glue, Apache Spark e serviços nativos AWS; * Construir e otimizar arquiteturas de dados distribuídas, aplicando boas práticas de particionamento, compressão e formatos colunares (Parquet, ORC, Iceberg etc.); * Desenvolver processos de ingestão e transformação de dados em Python e SQL; * Automatizar fluxos de dados com ferramentas de orquestração (ex.: Airflow, Step Functions, MWAA); * Aplicar práticas de CI/CD, testes automatizados e versionamento de código (Git) em pipelines de dados; * Implementar observabilidade em pipelines (logs, métricas, alertas e monitoramento proativo); * Otimizar performance e custos (FinOps) em pipelines e workloads analíticos. **Requirements:** ----------------- * Projetar e implementar pipelines de dados escaláveis em AWS Glue, Apache Spark e serviços nativos AWS; * Construir e otimizar arquiteturas de dados distribuídas, aplicando boas práticas de particionamento, compressão e formatos colunares (Parquet, ORC, Iceberg etc.); * Desenvolver processos de ingestão e transformação de dados em Python e SQL; * Automatizar fluxos de dados com ferramentas de orquestração (ex.: Airflow, Step Functions, MWAA); * Aplicar práticas de CI/CD, testes automatizados e versionamento de código (Git) em pipelines de dados; * Implementar observabilidade em pipelines (logs, métricas, alertas e monitoramento proativo); * Otimizar performance e custos (FinOps) em pipelines e workloads analíticos. Requisitos técnicos * Experiência sólida em engenharia de dados com foco em AWS (S3, Glue, Athena, EMR, Redshift, Step Functions, Lambda); * Domínio de Python para processamento e orquestração de dados; * Conhecimento avançado em SQL e técnicas de modelagem de dados; * Experiência em arquiteturas distribuídas e Big Data; * Vivência em CI/CD e boas práticas de engenharia de software aplicadas a dados; * Diferencial: experiência em formatos colunares, otimização de queries e tuning de performance em ambientes de alto volume. **Benefícios:** * 10 dias úteis de férias remuneradas após 1 ano de empresa; * Plataforma Alura 100% disponível para realizar cursos; * Total Pass; * IFood Benefícios Descontos Exclusivos: Acesso a descontos exclusivos em uma ampla gama de restaurantes e estabelecimentos de alimentos através do Clube iFood.; * Quatro consultas médicas por mês, incluindo nutricionista, psicólogo e clínica médica; * Descontos de até 80% em farmácias; * Descontos de até 70% em consultas e exames, incluindo Grupo Fleury, DASA, MedicMais, Clínica da Cidade, Labi Exames, Sorridents, SOS Consultas Médicas, VLS Médici e Acesso Saúde; * Club iFood: R$ 50,00 de cupom (5 cupons de até R$ 10,00\); * Descontos em diversos parceiros do iFood Benefícios, tais como Dr. Consulta, Magalu, Conquer, Cinemark, Ticket Verde, entre outros. **Informações Adicionais:** * Contrato PJ * Pagamento mensal fixo * Notebook * Home office * Horário 09:00 as 18:00