[Job-31441] Mid Level Data Developer (Databricks - Spark, PySpark), Brasil
Ci&T · Remoto, BR
Na CI\&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI\-native e tech\-integrated business solutions. Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data \& AI, martech e business strategy. Somos 8\.000 CI\&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias. **Importante**: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente. Olá, aqui é a Wal da CI\&T! Sou do time de Talent Attraction e estou em busca de profissionais localizados no Brasil para atuar como **Mid Level Data Developer (Databricks \- Spark, PySpark)** Buscamos uma pessoa Data Developer para ser a força motriz de um projeto de alta visibilidade: a migração de nossos dados do on\-premise para a nuvem (Databricks). Seu papel será fundamental desde o início, participando de um assessment técnico para mapear o cenário atual e definir o roadmap da migração. Você será a ponte entre a engenharia de dados robusta e a criação de valor analítico para o negócio, garantindo que nossos dados sejam não apenas bem estruturados, mas também prontos para gerar insights. ### **Responsabilidades:** * Construção de Pipelines de Dados: Projetar, desenvolver e otimizar pipelines de dados eficientes e escaláveis usando SQL avançado e Python/PySpark. * Modelagem para Análise: Criar e manter modelos de dados otimizados para consumo analítico, aplicando as melhores práticas de mercado como domínio de padrões de modelagem de dados (Star Schema e Snowflake Schema) e a estruturação em camadas (Bronze, Silver, Gold) para construir tabelas analíticas (OBTs) de alto desempenho. * Garantia de Qualidade e Governança: Implementar e liderar rotinas de testes, validações e governança para garantir a integridade, consistência e confiabilidade dos dados em todas as etapas do pipeline. * Resolução de Problemas e Comunicação: Atuar como referência técnica, mobilizando as equipes necessárias, comunicando\-se de forma eficaz para resolver impedimentos e traduzindo requisitos de negócio em soluções de dados. * Gestão do Roadmap Técnico: Criar e gerenciar o roadmap do projeto, identificando dependências técnicas, planejando entregas e gerenciando mudanças de forma proativa. ### **Requisitos** * Experiência Prática com a Stack: Vivência sólida com bancos de dados relacionais (SQL, Oracle) e, principalmente, com o ecossistema Databricks (Spark, PySpark) e orquestradores como Azure Data Factory (ADF). * Modelagem de Dados Aplicada: Profunda compreensão e experiência na implementação das camadas de dados Bronze, Silver e Gold, além de modelos como Star Schema e Tabelas Analíticas (OBT). * Conhecimentos Fundamentais: Compreensão sólida de qualidade de dados, governança e operações essenciais como MERGE em ambientes de Data Lakehouse e conhecimento de padrões de engenharia de dados como por exemplo CDC (Change Data Capture) e o CDF (Change Data Feed) * Utilização de IA no dia a dia para desenvolvimento acelerado com agentes Liderança e Comunicação: * Capacidade de lidar com tarefas pouco descritas, usando a comunicação e a investigação para refinar o entendimento. * Experiência na criação e gestão de roadmaps técnicos. \- Proficiência em Código: Domínio de SQL para consultas complexas e \- Python/PySpark para transformação e manipulação de dados. ### **Diferenciais** * Certificações em Databricks ou Azure (ex: Azure Data Engineer, Databricks Certified Data Engineer Associate e/ou Databricks Certified Data Engineering Professional ). * Experiência com ferramentas de orquestração de workflows (ex: Airflow). * Familiaridade com plataformas de Business Intelligence (ex: Power BI, Tableau) e como os dados são consumidos. * Vivência em metodologias ágeis. \#LI\-WC2 **Nossos benefícios:** * Plano de saúde e odontológico; * Vale alimentação e refeição; * Auxílio\-creche; * Licença parental estendida; * Parceria com academias e profissionais de saúde e bem\-estar via Wellhub (Gympass) TotalPass; * Participação nos Lucros e Resultados (PLR); * Seguro de Vida; * Plataforma de aprendizagem contínua (CI\&T University); * Clube de descontos; * Plataforma online gratuita dedicada à promoção da saúde física, mental e bem\-estar; * Curso gestante e parentalidade responsável; * Parceria com plataformas de cursos online; * Plataforma para aprendizagem de idiomas; * E muitos outros Mais detalhes sobre os nossos benefícios aqui: https://ciandt.com/br/pt\-br/carreiras Na CI\&T, a inclusão começa no primeiro contato. Se você é pessoa com deficiência, é importante **apresentar o seu laudo durante o processo seletivo.** *Consulte quais dados são necessários conter no laudo* *clicando aqui.*Assim, podemos garantir o suporte e as adaptações que você merece. **