Na CI&T, você poderá contribuir para um projeto de alta visibilidade, criando e migrando bases de dados no Databricks. Seu trabalho ajudará a transformar dados bem estruturados em informações úteis para o negócio. Para quem reside na Região Metropolitana de Campinas, a presença nos escritórios da cidade é obrigatória, conforme a política de frequência vigente.
Responsabilidades
- Desenvolver e otimizar pipelines de dados com SQL, Python e PySpark
- Criar e manter modelos de dados para análises, incluindo estruturas em camadas Bronze, Silver e Gold, Star Schema e tabelas analíticas (OBTs)
- Implementar testes, validações e práticas de governança para promover a integridade e a confiabilidade dos dados
- Traduzir necessidades de negócio em soluções de dados, comunicar impedimentos e colaborar com as equipes envolvidas
Requisitos obrigatórios
- Vivência com bancos de dados relacionais, como SQL e Oracle
- Experiência com Databricks, Spark e PySpark, além de orquestração com Azure Data Factory (ADF)
- Conhecimento na implementação das camadas Bronze, Silver e Gold, de modelos Star Schema e de tabelas analíticas (OBTs)
- Conhecimentos de qualidade e governança de dados e da operação MERGE em ambientes Data Lakehouse
- Domínio de SQL para consultas complexas e de Python/PySpark para transformação e manipulação de dados
Diferenciais
- Certificações em Databricks ou Azure, como Azure Data Engineer
- Experiência com ferramentas de orquestração de fluxos de trabalho, como Airflow
- Familiaridade com ferramentas de inteligência de negócios, como Power BI e Tableau
- Vivência em metodologias ágeis
O que esperamos
Buscamos uma pessoa que tenha interesse em engenharia de dados e em transformar requisitos de negócio em soluções analíticas confiáveis. Você colaborará com diferentes equipes para superar desafios e contribuir para a evolução das bases de dados.
