Especialista em Engenharia de Dados - Open Finance

Condomínio Parque da Cidade , Brazil
Full-Time

AI overview

Contribute to machine learning by processing petabytes of data for Open Finance, building cloud data pipelines using Spark and Airflow to enhance scoring models for millions.

Nossa equipe é responsável pelo processamento de features para machine learning, que alimenta os principais produtos e modelos de score da companhia. Trabalhamos com volumes de dados na escala de petabytes, processando o maior banco de dados da América Latina. Buscamos um profissional dedicado e apaixonado por tecnologia para se juntar a nós nessa jornada de inovação.

Sua atuação inicial será no projeto de Open Finance, atuará construindo pipelines de movimentação de dados na nuvem e categorização de transações, aplicando ferramentas proprietárias de NLP para tratamento dos dados, com o objetivo de alimentar produtos e ajudar milhões de pessoas a melhorar seus Scores.

Nessa posição, você atuará principalmente com Spark, rodando em EMR e orquestrado via Airflow. Esteja disposto a aprender, pois o Serasa tem um mundo à parte de conceitos e produtos. Buscamos uma pessoa que consiga rapidamente entender os padrões de arquitetura e propor soluções performáticas, nos ajudando a tornar produtos realidade.

Dia a dia:

  • Tradução de código para Spark (Python e Scala)
  • Construção de pipelines de dados
  • Construção de Dags Airflow
  • Otimização do uso de recursos do EMR por job
  • Otimização de Código
  • Homologação de bases de dados
  • Cobertura de testes unitários
  • Acompanhamento e defesa dos projetos em comitês de arquitetura.
  • Python
  • Spark
  • Airflow
  • AWS
  • EMR
  • Kafka (desejável)
  • Scala (desejável)

A Serasa Experian é muito mais do que você imagina. Com o propósito de criar um futuro melhor, ampliando oportunidades para pessoas e empresas, no Brasil somos mais de 4 mil pessoas que atuam em diversos times e especialidades. Aqui, cada conhecimento e diversidade se complementa e você pode trabalhar no que mais ama, estamos comprometidos a construir uma cultura inclusiva e um ambiente no qual pessoas possam equilibrar a carreira com seus compromissos e interesses pessoais, prezando pelo bem-estar.

A gente se dedica muito em ser uma das melhores e mais inovadoras empresas para se trabalhar do país, possibilitando experiências e carreiras incríveis para nossas pessoas. Nossa forte abordagem de pessoas em primeiro lugar é reconhecida externamente por meio de diversas certificações de mercado: fomos premiados pelo Great Place To Work™ em 24 países e pela certificação internacional Top Employers, além de sermos reconhecidos como uma das melhores empresas para jovens profissionais e contarmos com uma avaliação de 4,6 no Glassdoor. Cada reconhecimento nos indica que estamos no caminho certo, proporcionando um ambiente de trabalho cada vez melhor para nossos talentos.

Experian Careers - Creating a better tomorrow together

Find out what its like to work for Experian by clicking here

Careers at Experian. Find Great Talent with Career Pages. | powered by SmartRecruiters | Find Great Talent with a Career Page.

View all jobs
Get hired quicker

Be the first to apply. Receive an email whenever similar jobs are posted.

Ace your job interview

Understand the required skills and qualifications, anticipate the questions you may be asked, and study well-prepared answers using our sample responses.

Finance/Accounting Q&A's
Report this job

This job is no longer available

Enter your email address below to get notified whenever we find a similar job post.

Unsubscribe at any time.