Тёмный

Загрузка JSON из MS SQL Server в ClickHouse через Debezium и Kafka 

Maxim Khlupnov
Подписаться 239
Просмотров 2,8 тыс.
50% 1

Опубликовано:

 

2 окт 2024

Поделиться:

Ссылка:

Скачать:

Готовим ссылку...

Добавить в:

Мой плейлист
Посмотреть позже
Комментарии : 6   
@danilmerkurev6248
@danilmerkurev6248 10 месяцев назад
У вас тоже не работает это видео?
@ОлегБасманов-ю5щ
Здраствуйте Максим. Спасибо за видео, очень помогло в аналогичной настройке с ораклом. Но возник вопрос. Вы используете трансформацию "transforms" : "unwrap", "transforms.unwrap.type" : "io.debezium.transforms.ExtractNewRecordState". В документации к дебезиумум описано что таким образом состояние before опускается, а состояние after пишет. Так собственно и происходит. Но вот в вашем видео схема json упрощается куда больше - если раньше json состояли из двух полей schema и payload, то теперь берется лишь значение payload. Как вы это сделали? В вашем конфиге не видно каких то еще трансоформаций
@ОлегБасманов-ю5щ
на всякий случай, если вдруг кто станет искать. Решается через использование key.converter=org.apache.kafka.connect.json.JsonConverter value.converter=org.apache.kafka.connect.json.JsonConverter key.converter.schemas.enable=false value.converter.schemas.enable=false
@alexserbul
@alexserbul 3 года назад
Спасибо!
@anatgu3397
@anatgu3397 3 года назад
Пфф, кондактор тоже бесплатен только для одного брокера в кластере, а я то уже губу раскатал....
@KinectRazor
@KinectRazor 3 года назад
Conductor в данном случае используется для демонстрации. В кластере Kafka все будет аналогично. А в GUI на топики веселее смотреть
Далее
Airpod Through Glass Trick! 😱 #shorts
00:19
Просмотров 1,4 млн
ХОККЕЙНАЯ КЛЮШКА ИЗ БУДУЩЕГО?
00:29
Вредные советы ClickHouse
32:04
Просмотров 7 тыс.
Apache Kafka and Debezium | DevNation Tech Talk
30:58
Airpod Through Glass Trick! 😱 #shorts
00:19
Просмотров 1,4 млн