Engenheiro de Dados | Projeto J-tech

A Koopere está com oportunidade para arquitetura de dados para atuar no projeto da J-tech, nosso cliente.

Estamos em busca de um Engenheiro de Dados para atuar na construção e manutenção de pipelines de dados, garantindo a coleta, tratamento e disponibilização de dados de forma segura, eficiente e escalável. O profissional será responsável por integrar diferentes fontes de dados, estruturar data lakes e apoiar a arquitetura de dados da organização bem como atuará em projetos específicos de automatização de dados.

Segue os requisitos que avaliamos necessários:

Tecnologias obrigatórias:

• Apache NiFi:
  • Desenvolvimento de fluxos de dados (Data Flows).
  • Manipulação de Process Groups, Templates e Processadores personalizados.
  • Monitoramento, troubleshooting e otimização de performance de pipelines.
• Apache Kafka:
  • Produção e consumo de mensagens (Producer/Consumer APIs).
  • Configuração de tópicos, partições e replicação.
  • Gerenciamento de Schema Registry (Avro/Protobuf) e boas práticas de versionamento de dados.
• Debezium:
  • Conhecimento de captura de alterações de dados (CDC – Change Data Capture).
  • Configuração de conectores para bancos de dados relacionais (MySQL, PostgreSQL, SQL Server etc.).
  • Monitoramento de integridade de eventos em tempo real.

Arquitetura de Dados:

• Arquitetura de Medalhão (Bronze, Silver, Gold):
  • Estruturação de dados em camadas de ingestão, processamento e consumo.
  • Conhecimento em boas práticas de modelagem incremental e versionamento de datasets.
  • Estratégias de governança de dados e qualidade dos dados.

Bancos de Dados e Sistemas de Armazenamento:

• Experiência com bancos de dados relacionais (PostgreSQL, MySQL, SQL Server).
• Conhecimento de Data Lakes e armazenamento de dados em sistemas distribuídos (preferencialmente S3, HDFS ou similares).

Ferramentas e Linguagens Complementares:

• SQL avançado para consultas, extrações e transformações de dados.
• Desejável conhecimento em Shell Script ou Python para integrações e automações.
• Experiência com plataformas de mensageria em nuvem (ex.: Confluent Cloud, AWS MSK, GCP Pub/Sub) é um diferencial.

Habilidades Comportamentais:

• Raciocínio lógico e visão sistêmica de arquiteturas de dados.
• Autonomia e capacidade de trabalhar em ambientes ágeis.
• Boa comunicação para interagir com equipes de produto, engenharia e negócios

Modelo de atuação

• Nosso modelo de atuação é o 100% remoto.

Benefícios ao cooperado:

👉Maior liquidez mensal

👉Menor burocracia

👉Plano Saúde nacional

👉Plano Odontológico nacional

👉Seguro de vida

👉Parceria e desconto com psicólogas, rede de hóteis, instituições de ensino, escolas de idiomas e mais!

👉Descanso anual remunerado

Antes de começar esse voo, é importante que você saiba o que a J-tech oferece:

🖥️ Muita inovação tecnológica;

⌚️ Horários flexíveis;

🚀Cultura de Startup;

👕 No dress code;

💬 Cultura que valoriza feedbacks;

🌎 Anywhere Office;

https://koopere.com.br/

https://www.linkedin.com/company/kooperecooperativa/

#LI-Remote