Сбор данных PostgreSQL Chage в Talend

Мне нужно фиксировать изменения PostgreSQL, и я бы предпочел, чтобы они были основаны на журнале.

Как работает tpostgresqlCDC? Основан ли он на журнале/триггере?

Доступен ли этот компонент в открытой студии Talend для костюма интеграции данных? Я знаю, что он доступен в версии для больших данных, но я могу найти его в открытой студии Talend для интеграции данных?


postgresql talend change-data-capture
person rachid el kedmiri    schedule 10.04.2017    source источник
comment
Пробовали ли вы help.talend.com//pages/ ? Все компоненты CDC доступны только в лицензионных продуктах, а не в редакции Open Studio.   -  person Corentin    schedule 11.04.2017
comment
Спасибо, Корентин, за то, что ответил мне, проблема в том, что Talend реализует CDC с помощью триггеров, которые добавляют оценку 8% накладных расходов. Учитывая возраст проекта Talend, кто-нибудь нашел решение этой проблемы.   -  person rachid el kedmiri    schedule 11.04.2017

Ответы (1)


arrow_upward
2
arrow_downward

За исключением AS400 и Oracle, все Talend CDC основаны на триггерах плюс:

  • это только в подписной версии
  • по крайней мере, в реализациях MySQL - я нашел неправильную логику

в отличие от MySQL он не так широко доступен, но вы можете попробовать проверить:

  1. Бутилированная вода
  2. wla2jjson
  3. Debezium , основной сайт

CDC + Kafka — дайте реальную гибкость

person a_vlad    schedule 12.07.2017