CDC na prática com Kafka Connect!

preview_player
Показать описание
Projeto prático que ilustra o uso do Kafka Connect como ferramenta de Change Data Capture (CDC)! Bora?

🤩 Seja membro deste canal e ganhe benefícios:

💻 Github: giuliana-bezerra/spring-boot-cdc

🏠 Página Pessoal:

🌟 Conheça também os meus conteúdos em outras plataformas:
  1. Giuliana Bezerra
  2. change data capture
  3. Kafka connect
  4. kafka
  5. microsserviços kafka
  6. cdc
Рекомендации по теме
CDC na prática 0:22:08

CDC na prática com Kafka Connect!

DX Lab - 0:46:45

DX Lab - CDC na Prática - Kafka Connect extraindo dados do SQL Server | Developer Experience

DX Lab | 0:07:37

DX Lab | DICA | Kafka Connect - Transformação de Mensagens (SMT) - CDC Debezium - Gunnar Morling

Como Usar Apache 0:48:33

Como Usar Apache Kafka na Prática: Um Guia do Zero!

Kafka e Kafka 2:19:56

Kafka e Kafka Connect na Prática com Marcelo Costa e Ronaldo Lanhellas

Streaming de eventos 0:13:36

Streaming de eventos com Kafka CDC: O que é Kafka CDC

Event streaming com 0:24:30

Event streaming com Kafka CDC : Use-Case de Replicação Técnica

Como inserir dados 0:17:53

Como inserir dados em um MongoDB utilizando o Apache Kafka Change Data Capture (CDC) de arquivos CSV

Data Pipelines: Using 0:07:20

Data Pipelines: Using CDC to Ingest Data into Kafka

Event streaming com 0:10:33

Event streaming com Kafka CDC : Use-Case de Event Sourcing

Intensivão Apache Kafka: 1:52:06

Intensivão Apache Kafka: Streaming de dados e mensageria na prática

Kafka do Zero: 0:34:25

Kafka do Zero: Mão na massa

Apache Kafka & 1:06:13

Apache Kafka & KSQLDB ~ Ingestão e Processamento de Dados em Real-Time

Happy Hour com 2:35:16

Happy Hour com Dados #12 - Apache Kafka na Prática

Descobrindo os super 1:23:49

Descobrindo os super poderes do KSQLDB - Banco de dados e Kafka em um lugar só?

Nifi comunicando dados 0:16:14

Nifi comunicando dados com o Kafka.

Integração de dados 0:23:12

Integração de dados utilizando Kafka + Kafka Connect + Debezium

DX Lab | 1:07:54

DX Lab | Utilizando Kafka Connect com JDBC Source Connector para extrair dados

Event streaming com 0:30:48

Event streaming com Kafka CDC : Aprendizagens and Q&A

Kafka Connect: Integração 1:52:16

Kafka Connect: Integração entre sistemas na prática

Conceitos Básicos do 1:05:24

Conceitos Básicos do Apache Kafka e Use-Cases

Construindo um Data 1:14:03

Construindo um Data Pipeline em Batch com Apache Kafka, S3 & Trino

Introduction to Debezium 0:21:02

Introduction to Debezium and CDC

CDC com Debezium, 1:27:13

CDC com Debezium, OpenShift, Kafka e .NET8

Комментарии
Автор

Por 11 anos fui intrutor no Senac, mas vou te falar, sua didática é 10! Parabéns! Seu canal traz excelentes conteúdos!

kleisernairobi
Автор

Muito bom, não sei por que não assisti esse vídeo antes ❤ parabéns Giuliana.

gabrielrochasantana
Автор

Excelente vídeo; claro, conciso e objetivo.

vmf
Автор

Gosto tanto que trabalho te ouvindo, como um PODCAST. E ainda absorvo informação de qualidade!

gabrielaclaro
Автор

Excelente vídeo! Acho que seria massa um sobre o Pattern Transactional outbox.

tonyblacksi
Автор

Eu uso há algum tempo ja o Connect.

Nós temos a camada de transformação também e usamos a UI do Kafka Central da Confluent pra subir as configurações.

Source Relacional e Sink NoSql. Postgres pra MongoDB. Era pra ser feito via código, mas entramos com essa solução.

Ta la funcionando desde 11/22.

jamescastro
Автор

Video formidável como sempre. Metodologia incrível. Feliz em ter descoberto esse excelente canal.

renerpires
Автор

Muito obrigado pelo vídeo! Super esclarecedor sobre a prática do CDC no ambiente de trabalho. Gostaria de dar meus 2 centavos e apresentar uma alternativa à este método, utilizando apache camel e Dabezium, ambos open-souce e com desenvolvimento ativo, trabalhei recentemente em um projeto interno da empresa que facilitou bastante a integração de banco de dados.

davidfornazier
Автор

Muito bom o video, e depois tenho interesse no padrao outbox

mauriciovilela
Автор

Vídeo excelente! Já usei o kafka streams pra enriquecer os dados e mandar para um novo tópico e um outro serviço consumia o tópico com os dados ricos.

franciscoviana
Автор

O Debezium por si só já faria o CDC com maestria. Qual foi a vantagem de usar o Kafka?

alexsandermartinsdossantos
Автор

Será que não dá pra fazer isso sem colocar o Kafka no meio? Teria alguma vantagem de ter o Kafka ali?
Se entendi direito o Debezium e o MySQL binlog são as estrelas do show na replicação MySQL para PostgreSQL, não exatamente o Spring nem o Kafka Connect.
Mas achei muito curioso como você explicou sincronização de BDs sem abrir o

titocito
Автор

Olá, primeiramente parabéns pelo conteúdo, Kafka Connect é algo complexo e vc conseguiu mostrar isso na prática em pouco mais de 20 minutos! Minha dúvida é, vc acha essa abordagem válida na aplicabilidade de CQRS? Uma vez que estamos sincronizando as bases!

CarlosLima-ykcf
Автор

Voce ja usou Istio+Jaeger? Para colocar no dashboad Jaeger as requisições heder e body ?

arozendojr
Автор

Muito bom. Mas uma dúvida: o kafka connect com essa configuração do video, teria custo? Pensei que nesse setup simples, fosse open-source

tav