Engenheiro de Dados II

Estamos buscando um(a) **Engenheiro(a) de Dados Pleno** com experiência em **Governança de Dados** e atuação direta em **Databricks**. Este profissional será responsável por implementar, estruturar e evoluir mecanismos de governança, segurança, catalogação e qualidade de dados dentro de um ambiente de Data Lakehouse. O(a) Engenheiro(a) atuará em estreita colaboração com times de arquitetura, analytics, engenharia e compliance, garantindo que os dados sejam confiáveis, rastreáveis e governados de acordo com as melhores práticas. **Responsabilidades:** * Implementar e gerenciar mecanismos de **governança de dados no Databricks**, incluindo permissões, acessos, Unity Catalog e estruturas de segurança. * Estruturar e manter o **Unity Catalog**: criação de metastore, catálogos, schemas, tabelas e policies. * Atuar na organização e governança do **Delta Lake**, definindo padrões, versionamento, lineage e processos de auditoria. * Garantir **qualidade, rastreabilidade e conformidade** dos dados em todo o ciclo de vida. * Desenvolver e manter padrões de **nomenclatura, documentação, tags, classificações e data stewardship**. * Criar processos automatizados para monitoramento, auditoria e verificação de segurança e acesso. * Apoiar squads e times de engenharia na adoção das práticas de governança. * Trabalhar com áreas de negócio para garantir aderência a políticas de compliance (LGPD e correlatas). * Participar das decisões de arquitetura e melhores práticas para o ambiente lakehouse. **Requisitos Técnicos o****brigatórios:** * Experiência sólida com **Databricks** (Unity Catalog, Delta Lake, ACLs, cluster/pool governance). * Domínio de **SQL** e bom conhecimento em **Python** (Pandas/PySpark). * Entendimento de **arquitetura lakehouse** e governança em ambientes distribuídos. * Experiência com implementação de políticas de segurança, controle de acesso e modelos de permissionamento. * Vivência com **metadados, catalogação, classificação de dados e lineage**. * Familiaridade com boas práticas de data governance (DAMA, frameworks corporativos). * Conhecimento de plataformas cloud: **Azure** (preferencial), AWS ou GCP. **Desejáveis:** * Experiência com **Azure Purview / Microsoft Fabric / Databricks Unity Catalog**. * Conhecimento de ferramentas de qualidade de dados (Great Expectations, Deequ). * Experiência com CI/CD, Git e automação de deploys em Databricks. * Noções de Data Mesh, Data Contracts e Data Observability. * Vivência com LGPD, segurança e compliance de dados.