Dadoteca
Resumo da PosiçãoBuscamos um(a)Engenheiro(a) de Dados com certificação obrigatória Databricks Certified Data Engineer Professional , para atuar no desenvolvimento de soluções de dados em Azure e Databricks.
Principais atividades
- Projetar, desenvolver e manter pipelines de dados em Azure e Databricks, com foco em performance, escalabilidade e confiabilidade.
- Implementar e gerenciar processos ETL / ELT utilizando Azure Data Factory, Databricks e Synapse Analytics.
- Otimizar modelos de dados e fluxos de processamento para suportar análises complexas e relatórios corporativos.
- Monitorar e resolver gargalos de performance, garantindo alta disponibilidade e eficiência operacional.
- Integrar e transformar dados de múltiplas fontes, garantindo qualidade e rastreabilidade via Unity Catalog.
- Colaborar com times de BI, Analytics e Desenvolvimento, traduzindo necessidades de negócio em soluções técnicas de dados.
- Documentar arquiteturas, pipelines e boas práticas, propondo melhorias contínuas e inovações tecnológicas.
Requisitos
- Graduação em Engenharia de Dados, Ciência da Computação, Sistemas de Informação, Matemática ou áreas correlatas.
- Certificação obrigatória : Databricks Certified Data Engineer Professional.
- Experiência comprovada em engenharia de dados e manutenção de pipelines ETL / ELT.
- Domínio do ecossistema Azure : Data Factory, Databricks, Synapse Analytics, Data Lake, Event Hub / Service Bus e Microsoft Fabric.
- Conhecimentos avançados em Spark (PySpark ou Scala) e SQL.
- Experiência com bancos de dados relacionais e não relacionais (SQL Server, PostgreSQL, CosmosDB).
- Proficiência em Python para manipulação, integração e automação de dados.
- Vivência com versionamento (Git) e integração / entrega contínua (CI / CD).
- Experiência com Unity Catalog e Delta Lake.
- Competências
- Capacidade analítica e técnica para lidar com grandes volumes de dados e arquiteturas distribuídas.
- Criação e manutenção de catálogos de dados corporativos no Unity Catalog.
- Proatividade na resolução de problemas complexos com soluções escaláveis e sustentáveis.
- Boa comunicação e colaboração com equipes multidisciplinares.
- Organização, atenção a detalhes e foco em resultados.
Diferenciais
- Certificações adicionais Microsoft (ex. : Azure Data Engineer Associate).
- Experiência em arquiteturas modernas de dados (Lakehouse, Data Mesh, Delta Sharing).
- Conhecimento em Power BI para validação de modelos e KPIs.
- Vivência em projetos de engenharia de dados corporativos de grande porte.
- #J-18808-Ljbffr
