[Job-31931]Senior Data Engineer , Brazil

Job description

Na CI&T, ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.

Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.

Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.

Importante: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.

Estamos em busca de uma pessoa para atuar como Data Developer, integrando nosso time e contribuindo na construção de soluções escaláveis e inteligentes para grandes volumes de dados.

Se você é apaixonado por dados, tem experiência sólida com AWS e modelagem de dados, gosta de resolver problemas complexos e colaborar com equipes multidisciplinares, essa vaga é para você!

Responsabilidades:

- Atuar no desenvolvimento e evolução de aplicações para ingestão de dados utilizando ferramentas AWS, tanto em arquitetura serveless (glue, lambda, sns, sqs, kafka, etc) quanto com arquiteturas que usam ECS;

- Realizar o entendimento das necessidades técnicas, participando de inceptions e refinamentos;

- Codificar e estruturar testes automatizados para garantia de qualidade dos entregáveis;

- Realizar code review e Deploy em produção;

- Gestão de Incidentes;

- Otimizar jobs e pipelines de dados, atuando em particionamento de dados, balanceamento de dados (skew) e tuning de performance;

Projetar e manter orquestrações de pipelines utilizando AWS Step Functions e AWS EventBridge;

- Configurar e acompanhar monitoria/observabilidade utilizando AWS CloudWatch e, de forma desejável, ferramentas como Datadog;

- Atuar com foco em FinOps, garantindo uso eficiente de recursos na nuvem e buscando oportunidades de otimização de custo nas soluções de dados.

Requisitos para este desafio:

Sólidos conhecimentos em Python e Experiência prática com PySpark;

Cloud com AWS (S3, glue, EC2, lambda, athena);

Automação de testes unitários;

Banco de dados Relacional;

Experiência em tuning e melhora de performance dos pipelines;

Desenvolvimento de testes automatizados usando a estratégia de pirâmide de testes;

Refinamento técnico de histórias e de solução;

Qualidade de código e boas práticas de programação;

Comunicação para garantir o alinhamento com time e stakeholers;

Capacidade de execução e proatividade;

Otimização de custos em nuvem e boas práticas de FinOps aplicadas a pipelines de dados;

Diferenciais:

Uso de IA generativa, agents e skills para agilizar o trabalho

Localstack com recursos AWS (infraestrutura as a code);

Arquitetura Serveless;

Datadog;

Mensageria (Kafka, SQS, SNS);

Nossos benefícios:

- Plano de saúde e odontológico;

- Vale alimentação e refeição;

- Auxílio-creche;

- Licença parental estendida;

- Parceria com academias e profissionais de saúde e bem-estar via Wellhub (Gympass) TotalPass;

- Participação nos Lucros e Resultados (PLR);

- Seguro de Vida;

- Plataforma de aprendizagem contínua (CI&T University);

- Clube de descontos;

- Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar;

- Curso gestante e parentalidade responsável;

- Parceria com plataformas de cursos online;

- Plataforma para aprendizagem de idiomas;

- E muitos outros

Mais detalhes sobre os nossos benefícios aqui: https://ciandt.com/br/pt-br/carreiras

Na CI&T, a inclusão começa no primeiro contato. Se você é pessoa com deficiência, é importante apresentar o seu laudo durante o processo seletivo. Consulte quais dados são necessários conter no laudo clicando aqui. Assim, podemos garantir o suporte e as adaptações que você merece. Se ainda não tem o laudo caracterizador, não se preocupe: podemos te apoiar para obtê-lo.

Temos um time dedicado de Saúde e Bem-estar, especialistas em inclusão e grupos de afinidade que estarão com você em todas as etapas. Conte com a gente para fazer essa jornada lado a lado.