Data Engineer (PySpark)

Nossa Oportunidade

.

Estamos à procura de um Engenheiro de Dados Python Sênior capaz de cobrir as funções de um especialista técnico. Se você é um consultor técnico talentoso e apaixonado por tecnologia que procura uma função dinâmica, então somos o lugar para você.

.

• Nossa oportunidade Remota e o modelo de contratação é CLT.

Atividades:

• Receber tarefas do líder do projeto ou do Líder de Equipe (TL), preparar especificações funcionais e de design, aprovando-as com todas as partes interessadas.
• Garantir que as áreas atribuídas sejam entregues dentro dos prazos estabelecidos e dos objetivos de qualidade requeridos.
• Fornecer estimativas, concordar com a duração das tarefas com o gerente e contribuir para o plano do projeto da área atribuída.
• Analisar o escopo de soluções alternativas e tomar decisões sobre a implementação com base em sua experiência e expertise técnica.

O perfil que buscamos:

• Proficiência avançada em SQL.
• Proficiência em linguagem de programação Python.
• Experiência em orquestração de ETL e ferramentas de gerenciamento de fluxo de trabalho, como Airflow.
• Experiência em Spark, Snowflake, Databricks, Flink - implementação necessária.
• Conhecimento sólido em Spark e otimizações de trabalhos Spark.
• Experiência em configurar corretamente o cluster para um job Spark, dependendo da carga e das computações esperadas.
• Bom conhecimento de Kafka e integração do Kafka com aplicações Pyspark.
• Experiência com Spark streaming e processamento de dados em tempo real.
• Conhecimento de Databricks e agendamento de jobs usando Workflow.
• Capacidade de passar em testes de código HackerRank.

Idioma: Inglês Avançado

Get the future you want

Por meio de uma força de trabalho diversificada que representa nossa sociedade promovemos uma cultura inclusiva, construindo um lugar onde nossos talentos são acompanhados por líderes transformacionais e equipes altamente engajadas. Através do SejaVocê@Capgemini expressamos o nosso compromisso em compreender continuamente as características e interesses que tornam cada uma das nossas pessoas únicas. Nos orgulhamos da nossa diversidade e estamos empenhados em promover um ambiente inclusivo e com equidade de oportunidades. Nossas vagas, são para todas as pessoas independente de cor, etnia, religião, idade, identidade de gênero, orientação sexual ou deficiência.

Somos reconhecidos pela GPTW como um ótimo lugar para trabalhar e uma das 10 melhores empresas para mulheres trabalharem no Brasil. Nosso compromisso com Equidade de Gênero também foi reconhecido pela Bloomberg pelo segundo ano consecutivo e somos certificados pela Edge e Edge Plus também focada em equidade de gênero. Além de estarmos no 11º ano consecutivo pelo Instituto Ethispere como uma das Empresas Mais Éticas do Mundo.

Aqui você pode ser quem você é: Protagonista do seu desenvolvimento com oportunidades de aprendizagem, crescimento e atuação em projetos desafiadores.

Além disso temos a preocupação em oferecer pacote de remuneração e benefícios competitivos no segmento, reconhecendo as competências, performance individual e de equipe. Voltados para o seu Bem Estar Físico, Emocional, Financeiro e Familiar.

• Pacote de Benefícios: Assistência Médica, Telemedicina Einstein Conecta, Plano Odontológico, Convênio Farmácia, Acesso a plataformas de saúde física e mental (Gympass e Equilibrium), Vale Refeição, Seguro de Vida, Previdência Privada, Auxílio Home Office, Empréstimo consignado, Plano de Participação Acionária, Clube de benefícios e muito mais!

• Plano de carreira que incentiva sua jornada e desenvolvimento, proporcionando visibilidade de forma clara sobre as oportunidades de carreira e os requisitos necessários para o seu próximo nível.

• Universidade Corporativa e Learning Hub : Aqui você constrói a sua própria trilha de desenvolvimento com uma formação dinâmica e acelerada. Terá acesso gratuitamente a cursos disponíveis parceiros de alto nível para aprimorar suas habilidades técnicas e comportamentais. Além de contar com plataformas de ensino reconhecidas como Harvard Manage Mentor, Coursera, Udemy e Pluralsight.

• Acesso a certificações oficiais com nossos parceiros como: AI Breakthrough award, AWS, Avasant, CDP “A” list, Ecovadis, Everest, Ethisphere, Gartner, IDC Google, Microsoft, SAP, Salesforce, ServiceNow e muito mais.

• Através da EF Education First (English Live Brasil): Você terá acesso a plataforma on line, com aulas adaptadas ao seu nível para se desenvolver nos idiomas: Inglês, Espanhol, Francês e Alemão .

Sobre a Capgemini

A Capgemini é líder global em parceria com empresas para transformar e gerenciar negócios, aproveitando o poder da tecnologia, desde estratégia e design até operações, alimentadas pelo mundo inovador e em rápida evolução da nuvem, dados, IA, conectividade, software, engenharia digital e plataformas

Contamos com mais de 360.000 profissionais presentes em mais de 50 países, em 2022 o Grupo reportou receitas globais de € 22 bilhões.

Somos guiados diariamente pelo propósito de liberar a energia humana por meio da tecnologia para um futuro inclusivo e sustentável e por nossos sete valores: Honestidade, Audácia, Confiança, Liberdade, Espírito de equipe, Modéstia e Fun. Se você compartilha dos mesmos valores, aqui é o seu lugar!