Ora2PgLoader

Модуль Ora2PgLoader предназначен для миграции данных из СУБД Oracle Database в СУБД PostgreSQL. Модуль позволяет выполнять перенос данных управляемо, сокращать необходимое окно остановки прикладной системы и поддерживать поэтапный переход от Oracle Database к PostgreSQL.
При переходе на PostgreSQL организации обычно должны решить несколько практических задач:

• Сократить простой бизнес-приложений во время переноса данных;
• Снизить риски ручных операций при подготовке, загрузке и проверке данных;
• Обеспечить согласованное состояние переносимых таблиц;
• Сохранить возможность поэтапного выполнения миграции.

Ora2PgLoader решает эти задачи за счет сочетания начальной загрузки данных, инкрементальной синхронизации и автоматизированного управления миграционными операциями. Основная логика миграции выполняется в PostgreSQL-расширении ora2pgloader, а командная утилита ora2pgloader управляет подключением, проверкой параметров, параллельным выполнением операций, отображением прогресса и завершением работ.

Функциональные характеристики

1. Прямая выгрузка/загрузка данных таблиц из Oracle в PostgreSQL;

2. Многопоточная выгрузка/загрузка данных;

3. Многопоточное построение индексов;

4. Автоматическое разбиение таблиц Oracle на батчи и равномерное распределение суммарного объема данных по потокам;

5. Выгрузка данных из Oracle на один и тот же SCN;

6. Поддержка переноса данных BLOB/CLOB до 1 ГБ;

7. Задание количества параллельных потоков выгрузки/загрузки, списка таблиц, их столбцов, трансформаций над ними, списка индексов и других параметров в конфигурационном файле формата JSON;

8. Мониторинг процесса загрузки через SQL-запросы;

9. CDC на основе журналов материализованных представлений Oracle;

10. Многопоточная синхронизация таблиц;

11. Распределение обрабатываемого объема изменений таблиц по потокам, близкое к равномерному;

12. Синхронизация последовательностей;

13. Логирование выполненных действий.