Sobre o livro

O Kafka se destaca como uma das ferramentas mais impactantes e versáteis na computação distribuída. Sua capacidade de lidar com grandes volumes de dados, em tempo real e com alta resiliência, transformou a maneira como sistemas modernos interagem, trocam informações e escalam suas operações. Desde pipelines de dados robustos até sistemas de eventos que conectam microsserviços, o Kafka se tornou um pilar essencial em arquiteturas contemporâneas.

No entanto, como em qualquer tecnologia poderosa, trabalhar com Kafka apresenta seus próprios desafios. Um dos mais comuns — e críticos — é a necessidade de garantir que os dados enviados e consumidos pelos tópicos mantenham consistência e estrutura ao longo do tempo. Imagine, por exemplo, uma aplicação que consome dados de um tópico e, de repente, recebe uma mensagem com um formato inesperado. Esse pequeno desvio pode causar erros imprevisíveis, comprometer integrações e até mesmo gerar indisponibilidade em sistemas downstream.

Um sistema downstream recebe dados ou depende de outro sistema para funcionar. Em uma arquitetura que possui o Kafka como um dos seus componentes, temos o sistema produtor de mensagens (que pode ser chamado de upstream) e o que consome as mensagens, chamado de downstream.

Ao confiar exclusivamente no Kafka para o transporte de mensagens, muitas equipes enfrentam dificuldades em gerenciar a evolução dos formatos de dados (schemas), assegurando compatibilidade entre versões e evitando quebras nos sistemas que dependem dessas informações. Esse cenário não apenas complica o desenvolvimento, como também adiciona complexidade à operação e manutenção de pipelines de dados.

É aqui que o Schema Registry entra em cena. Essa ferramenta permite que desenvolvedores, operadores e arquitetos registrem, validem e versionem os schemas de mensagens que trafegam nos tópicos Kafka. Com essa solução, as mensagens não são mais um "mistério" que depende de contratos informais ou comunicação verbal entre equipes. Em vez disso, o schema se torna uma fonte de verdade centralizada e confiável, trazendo ordem e previsibilidade para ambientes onde mudanças são inevitáveis.

Este livro foi pensado para ajudar você a compreender e aproveitar melhor o uso do Schema Registry e transformar a forma como trabalha com o Kafka. Ao longo das próximas páginas, você aprenderá a integrar essa poderosa ferramenta ao seu fluxo de trabalho, entenderá como evoluir schemas de forma segura e garantirá que a comunicação entre os serviços seja sempre consistente.

Seja você engenheiro(a) de dados, arquiteto(a) de sistemas ou desenvolvedor(a) back-end, este livro oferece o conhecimento necessário para resolver um dos maiores desafios ao trabalhar com sistemas distribuídos baseados em Kafka.

Bem-vindo(a) a esta jornada. Ao longo das páginas seguintes, você aprenderá como o Schema Registry fortalece as integrações com Kafka, trazendo mais previsibilidade e segurança para seus pipelines de dados. Com esse conhecimento, você estará preparado(a) para construir soluções escaláveis, resilientes e prontas para o futuro.

Sobre o autor

Rodrigo Vieira Pinto é mestre em Engenharia de Software pelo IPT-SP (Instituto de Pesquisas Tecnológicas de São Paulo) e pós-graduado em Engenharia de Software pela PUC-SP (Pontifícia Universidade Católica - SP). Possui cerca de 26 anos de experiência em desenvolvimento de sistemas em Java, PHP e Ruby, passando também pela linguagem C. Já trabalhou com servidores de aplicação como JBoss e Websphere, usando frameworks como EJB 2 e 3, JSP/Servlet, JSF e Hibernate (e ficou feliz quando o Spring Boot surgiu). Gosta muito de paradigmas de programação, padrões de projeto, testes automatizados, de código simples que funciona e de compartilhar conhecimento.

Ministra aulas de programação desde 2018, tanto em cursos livres quanto em faculdades, passando por Caelum, Grupo Alura, SPTech (São Paulo Tech School) e FIAP (Faculdade de Informática e Administração Paulista). Atualmente é Chapter Lead de Arquitetura e Backend da VR Benefícios e professor da disciplina de Domain-Driven Design with Java na FIAP.

Nas horas vagas, estuda tecnologias alternativas, história do Brasil e religião. Também pratica esportes como natação e corrida, e gosta de assistir a corridas de automóvel.

Amante de software bem escrito, entende que a tecnologia da informação tem muito a crescer e evoluir — e que nós, muito a contribuir.