Experian

Engenheiro de Dados Pleno

São Paulo, BrazilFull timePosted about 1 month ago
Apply on Experian →Sign in to save this role

Sign in to see who you know at Experian.

A Experian é uma empresa global de dados e tecnologia que impulsiona oportunidades para pessoas e empresas ao redor do mundo. Atuamos em diversos mercados, como serviços financeiros, saúde, automotivo, agronegócio, seguros, entre outros. A Experian investe em pessoas e em novas tecnologias avançadas para liberar o poder dos dados. Contamos com uma equipe incrível de 25.200 colaboradores em 32 países. Nossa singularidade é valorizar a sua. A cultura da Experian, centrada nas pessoas, inclusiva e orientada por propósito, é reconhecida por diversos prêmios — incluindo World’s Best Workplaces™ 2025 (Top 25 global da Fortune) e Great Place To Work™ em 26 países, entre outros. Confira o Experian Life nas redes sociais ou explore nosso site de carreiras para entender o porquê. A Experian também se orgulha de ser uma empregadora que promove igualdade de oportunidades e ação afirmativa. Estamos buscando um Engenheiro de Dados para atuar com grandes volumes de dados em um ambiente altamente escalável, utilizando principalmente Apache Spark/Python em Databricks. Esse profissional será responsável por desenvolver, otimizar e dar manutenção em pipelines de ingestão de dados, com foco em arquiteturas modernas e eficientes. Entre as principais atividades, destacam-se:Construção e manutenção de pipelines de ingestão utilizando Autoloader (incremental, schema evolution, otimização de throughput).Processamento de dados em larga escala usando Spark Structured Streaming e Spark SQL.Implementação de boas práticas de engenharia de dados, como particionamento, otimização com Delta Lake.Conhecimento de git controle de versionamento, pull requests.Análise, melhoria e otimização de custos e performance em Databricks.Implementar Data Quality.Criar documentação clara das demandas.Colaboração com times de negócio e analytics para garantir que os dados estejam estruturados e disponíveis com segurança. Experiência com Databricks para processamento, transformação e análise de grandes volumes de dados.Conhecimento sólido em processos de ETL (Extração, Transformação e Carga de Dados), garantindo a integração e qualidade das informações.Experiência em Engenharia de Dados, atuando na construção, manutenção e otimização de pipelines de dados escaláveis.Vivência com arquitetura de dados, modelagem de dados e integração entre diferentes fontes.Capacidade de desenvolver soluções para ambientes de dados em nuvem e ecossistemas de Big Data.Conhecimento em boas práticas de governança, qualidade e performance de dados. A Serasa Experian é muito mais do que você imagina. Com o propósito de criar um futuro melhor, ampliando oportunidades para pessoas e empresas, no Brasil somos mais de 4 mil pessoas que atuam em diversos times e especialidades. Aqui, cada conhecimento e diversidade se complementa e você pode trabalhar no que mais ama, estamos comprometidos a construir uma cultura inclusiva e um ambiente no qual pessoas possam equilibrar a carreira com seus compromis...

Read the full posting on Experian →