Термин · Глоссарий B2B-ПО

CDC (CDC)

Захват изменений данных (Change Data Capture) – механизм отслеживания вставок, изменений и удалений в источнике и передачи их в другие системы почти в реальном времени.

Буква «C» В категориях: 3 Платформ: 6+

Решения в каталоге

198 продуктов рубрики «ETL/ELT-системы»

Все 198 →

Продукт	Цена	Оценка	Реестры
Kaspersky Neural Networks Лаборатория Касперского	по запросу	мало отзывов	–	Подробнее →
Datareon Platform ДАТАРЕОН	по запросу	5,0 · 4	Реестр ПО	Подробнее →
Loginom Аналитические Технологии	по запросу	мало отзывов	Реестр ПО	Подробнее →

Первые три в порядке каталога. Рейтинг рубрики →

CDC (Change Data Capture, захват изменений данных) – подход к интеграции, при котором отслеживаются изменения в базе данных-источнике и передаются потребителям: хранилищу данных, поисковому индексу, другим сервисам. В отличие от периодической полной выгрузки, передаются только изменения и с малой задержкой.

Способы реализации

Чтение журнала транзакций СУБД (WAL в PostgreSQL, redo-логи, binlog в MySQL) – наименьшая нагрузка на источник.
Триггеры, записывающие изменения в отдельные таблицы.
Сравнение по временным меткам или версиям строк.

Типичная архитектура

Коннектор читает журнал изменений и публикует события в брокер сообщений (например, Apache Kafka), откуда их получают хранилище, микросервисы и потоковые обработчики. Распространённый инструмент с открытым кодом – Debezium.

Где применяется

Актуализация хранилищ и озёр данных в близком к реальному времени.
Синхронизация микросервисов и кешей.
Миграция данных между СУБД без длительной остановки.

Понятия из глоссария Цифрового маркетплейса, которые часто встречаются вместе с термином «CDC».

Платформы класса «CDC»

Решения из каталога Цифрового маркетплейса, относящиеся к этому классу ПО. Ссылки ведут на полные профили платформ с тарифами, обзорами и кейсами внедрения.