Термин · Глоссарий B2B-ПО

CDC (CDC)

Захват изменений данных (Change Data Capture) – механизм отслеживания вставок, изменений и удалений в источнике и передачи их в другие системы почти в реальном времени.

Буква «C» В категориях: 3 Платформ: 6+
Решения в каталоге

198 продуктов рубрики «ETL/ELT-системы»

Все 198 →
ПродуктЦенаОценкаРеестры
Kaspersky Neural Networks
Лаборатория Касперского
по запросу мало отзывов – Подробнее →
Datareon Platform
ДАТАРЕОН
по запросу 5,0 · 4 Реестр ПО Подробнее →
Loginom
Аналитические Технологии
по запросу мало отзывов Реестр ПО Подробнее →

Первые три в порядке каталога. Рейтинг рубрики →

Реклама

CDC (Change Data Capture, захват изменений данных) – подход к интеграции, при котором отслеживаются изменения в базе данных-источнике и передаются потребителям: хранилищу данных, поисковому индексу, другим сервисам. В отличие от периодической полной выгрузки, передаются только изменения и с малой задержкой.

Способы реализации

  • Чтение журнала транзакций СУБД (WAL в PostgreSQL, redo-логи, binlog в MySQL) – наименьшая нагрузка на источник.
  • Триггеры, записывающие изменения в отдельные таблицы.
  • Сравнение по временным меткам или версиям строк.

Типичная архитектура

Коннектор читает журнал изменений и публикует события в брокер сообщений (например, Apache Kafka), откуда их получают хранилище, микросервисы и потоковые обработчики. Распространённый инструмент с открытым кодом – Debezium.

Где применяется

  • Актуализация хранилищ и озёр данных в близком к реальному времени.
  • Синхронизация микросервисов и кешей.
  • Миграция данных между СУБД без длительной остановки.
Реклама

Понятия из глоссария Цифрового маркетплейса, которые часто встречаются вместе с термином «CDC».

Платформы класса «CDC»

Решения из каталога Цифрового маркетплейса, относящиеся к этому классу ПО. Ссылки ведут на полные профили платформ с тарифами, обзорами и кейсами внедрения.

DreamDocs

DreamDocs

OCR системы
ООО "АПЭРБОТ"
DreamDocs — платформа для автоматического распознавания и обработки документов с использованием искусственного...
Цена по запросу
Подробнее →
Smart ID Engine

Smart ID Engine

OCR и распознавание печатного текста
ООО "СМАРТ ЭНДЖИНС СЕРВИС"
Smart ID Engine
Цена по запросу
★ 4.7
Подробнее →
Directum Lite

Directum Lite

ECM-системы
ООО "ДИРЕКТУМ"
Cистема электронного документооборота для среднего и малого бизнеса
Цена по запросу
Подробнее →
LanDocs – платформа построения корпоративных систем документооборота и систем управления контентом (СЭД/ECM)

LanDocs – платформа построения корпоративных систем документооборота и систем управления контентом (СЭД/ECM)

ECM-системы
АКЦИОНЕРНОЕ ОБЩЕСТВО ЛАБОРАТОРИЯ НОВЫХ ИНФОРМАЦИОННЫХ ТЕХНОЛОГИЙ "ЛАНИТ"
Платформа ЛАНИТ для построения корпоративных СЭД и систем управления контентом: делопроизводство, ОРД, архив,...
Цена по запросу
★ 4.6
Подробнее →

Категории каталога

Разделы каталога Цифрового маркетплейса, в которые входят решения, использующие «CDC».

Частые вопросы про CDC

Чем CDC лучше полной выгрузки?

Передаются только изменения, поэтому меньше нагрузка и задержка.

Влияет ли CDC на производительность источника?

При чтении журнала транзакций влияние минимально; триггерный способ создаёт большую нагрузку.

Что такое Debezium?

Открытая платформа CDC, которая читает журналы изменений СУБД и публикует события в Kafka.