Data engineer sênior

Descrição: * Experiência com gestão de plataforma de Dataviz. * Experiência com Databricks, DBT ou correlato. * Experiência em engenharia de dados e BigData. * Fortes habilidades de programação em Python, Scala ou linguagens semelhantes. * Experiência prática na construção de pipelines de dados confiáveis usando tecnologias como Spark, Hadoop, Databricks, Kafka e SQL. * Profundo conhecimento de processamento de dados, se sentir confortável em trabalhar com conjuntos de dados de grandes volumes e em processos de ingestão, transformação e processamento distribuído de dados em alta escala. * Experiência com as mais recentes tecnologias e tendências em plataformas de dados e nuvem. * Familiaridade com bancos de dados e tecnologias analíticas do setor, incluindo Data Warehousing, Data Lakes, ETL e bancos de dados relacionais. * Experiência com modelagem de dados (Star Schema, Snowflake ou correlatos), com a capacidade de transformar dados brutos em modelos otimizados para consumo e análise. * Compromisso com a qualidade, você se orgulha de entregar um trabalho que se destaca pela precisão, desempenho e confiabilidade dos dados, estabelecendo um alto padrão para a equipe e para a organização. SERÁ UM DIFERENCIAL:* Se sentir confortável em trabalhar com tecnologias de conteinerização e orquestração (Docker, Kubernets); * Experiência com a plataforma QuickSight. Como Data Engineer Sênior, você será fundamental no desenvolvimento e manutenção de nossa infraestrutura de dados, garantindo o manuseio eficiente do processamento e armazenamento de dados em grande escala, apoiando na construção da nossa Plataforma de Dados Creditas. Algumas das responsabilidades são: * Capacidade de comunicar problemas de dados complexos, adaptando a mensagem ao público e apresentando\-a de forma clara e concisa; * Ter a capacidade de trabalhar em um ambiente dinâmico e ter uma abordagem proativa na resolução de problemas; * Ser uma referência de técnica para colegas engenheiros, demonstrando empatia, criatividade, curiosidade e capacidade em lidar com o cliente. Possuir fortes habilidades analíticas e de resolução de problemas, com capacidade de inovar e se adaptar a ambientes de ritmo acelerado; * Projetar e construir soluções escaláveis e seguras; * Responsável pela gestão e manutenção da plataforma de DataViz e Amazon Sagemaker Unified Studio, garantindo boas práticas e usabilidade das plataformas; * Projetar, construir e manter pipelines de dados e sistemas de banco de dados escaláveis e confiáveis, gerenciando soluções e automatizando processos, usando ferramentas como Spark, AirFlow, Redash, EMR e Redshift e garantindo a adesão às políticas de governança de dados; * Projetar, construir, manter e otimizar soluções na AWS, desenvolvendo soluções escalonáveis de processamento de dados, implementando processos CI/CD para essas soluções e aproveitando ferramentas de infraestrutura como código (IaC) para agilizar operações de dados e aprimorar implantações de soluções de dados; * Implementar soluções de dados usando tecnologias de ponta como Spark, Python e vários serviços AWS (S3, Redshift, EMR, Athena, Glue); * Orientar e treinar colegas engenheiros da equipe, promovendo um ambiente de crescimento e melhoria contínua; * Identificar e resolver deficit nas capacidades e processos da equipe para aumentar a eficiência e o sucesso da equipe. 2510280202221773735