0 views
Read
#0
Belajar Debezium - Pre-Requisites Skill & Setup Environment
Sebelum menyentuh Debezium, kalian perlu menguasai konsep database relasional, transaction log, streaming data, dan Apache Kafka. Di episode ini kalian menyiapkan environment Docker, menjalankan Kafka dengan mode KRaft dan Kafka Connect, lalu memverifikasi runtime Debezium pertama.
August 10, 2026
00
Read
#1
Belajar Debezium - Sejarah, Latar Belakang & Mengapa CDC
Episode ini mengupas sejarah dan latar belakang lahirnya Debezium, dari evolusi batch ETL menuju change data capture, perjalanan Red Hat hingga Apache, serta perbandingan CDC dengan polling dan batch beserta use case nyata yang melatarbelakanginya.
August 10, 2026
00
Read
#2
Belajar Debezium - Konsep Dasar & Arsitektur Debezium
Episode ini membedah arsitektur Debezium dari connector, Kafka Connect, hingga Kafka topics, bagaimana Debezium membaca log perubahan database, mekanisme offset, heartbeat, dan snapshot, serta hubungannya dengan schema registry dan format payload.
August 10, 2026
00
Read
#3
Belajar Debezium - Instalasi & Menyiapkan Connector
Episode ini memandu menjalankan Kafka Connect dan Debezium dengan Docker, mendaftarkan connector untuk MySQL, PostgreSQL, MongoDB, dan SQL Server, menyusun koneksi database beserta user privileges, lalu memverifikasi topic output dan pesan CDC pertama.
August 10, 2026
00
Read
#4
Belajar Debezium - Snapshot, Streaming, dan Offset Management
Episode ini membedah perbedaan snapshot awal versus streaming perubahan, cara offset disimpan dan dipulihkan saat restart, pengelolaan snapshot chunking dan initial data load, serta bagaimana Debezium menangani perubahan skema database.
August 10, 2026
00
Read
#5
Belajar Debezium - Payload Format & Schema Evolution
Episode ini membedah anatomi event Debezium — before, after, source, op, dan ts_ms — lalu membandingkan format payload JSON, Avro, dan Protobuf, integrasi dengan schema registry untuk evolusi skema, serta best practice field mapping dan konversi skema.
August 10, 2026
00
Read
#6
Belajar Debezium - Filtering, Routing, & Topic Design
Episode ini membahas pengaturan include dan exclude table maupun database, routing event ke topic berbeda, strategi penamaan topic dan partitioning, serta penggunaan transforms seperti RegexRouter dan Filter untuk logika routing kustom.
August 10, 2026
00
Read
#7
Belajar Debezium - Monitoring, Handling Failures, & Debugging
Episode ini membahas pemantauan connector, offset, dan lag, membaca log serta status connector dan error handling, menangani record parsing error, schema mismatch, dan database yang tidak tersedia, lalu membangun alert untuk kegagalan connector.
August 10, 2026
00
Read
#8
Belajar Debezium - Integrasi dengan Konsumen & Sink
Episode ini membahas menghubungkan event CDC ke Kafka consumers dan stream processors, memanfaatkan Kafka Streams, ksqlDB, Flink, Spark, dan sink database, mengalirkan data ke data lake dan data warehouse, serta use case materialized views dan analytics.
August 10, 2026
00
Read
#9
Belajar Debezium - Schema Registry & Data Contracts
Episode ini membahas membangun data contract untuk event schema, mengelola versioning schema dan compatibility rules, menangani schema evolution pada payload Debezium, serta memakai Avro dan Protobuf untuk validasi konsumen.
August 10, 2026
00