Engenheiro de Dados On-premises SR | Remoto

**Vem ser Solutis!** Estamos em busca de uma ou um **Engenheiro de Dados On\-premises SR** para compor nosso time! **Modelo de contratação:** CLT (Regime Exclusivo) **Atuação:** **REMOTA** **Requisitos obrigatórios:** * Implementação e otimização de soluções de processamento distribuído de dados com Spark. * Experiência com definição, implementação e manutenção de pipelines de dados robustos e escaláveis ETL/ELT, em cenários de big data e ambientes on\-premises. * Experiência com modelagem, otimização e implementação de estruturas de armazenamento de dados: data lake, data warehouse. * Implementação de orquestração de pipelines de dados com Airflow. * Domínio de Python e SQL para consulta e manipulação de dados. * Experiência com definição e implementação de regas de data quality. **Diferencial que valorizamos:** * Experiência com soluções de dados em nuvem AWS, Azure ou GCP **Tecnologias obrigatórias:** * Armazenamento: MinIO * Data Lake: Delta, Iceberg, Trino, Nessie * Data Quality: Great Expectations * Ingestão: Apache Hop, Apache NiFi * Processamento distribuído: Apache Spark * Orquestração: Apache Airflow * Conteinerização: Docker, Kubernetes * Bancos de dados relacionais: SQL Server, PostgreSQL * Linguagens: Python, PySpark e SQL