Дедофорум Z
     
powered by simpleCommunicator - 2.0.18     © 2024 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Map
Форумы / Просто Трёп [закрыт для гостей] / Буду тут работу искать, Поиск: Искать сообщения, созданные автором: IT-Клоп  
7 сообщений из 32, страница 2 из 2
  2  все
Просто Трёп / Буду тут работу искать
    #609300
IT-Клоп
Скрыть профиль Поместить в игнор-лист
IT-Клоп
Участник
Кусь  13.11.2023, 18:15
[игнорируется]
609278
IT-Клоп  13.11.2023, 18:08
[игнорируется]
609269
Кусь  13.11.2023, 18:04
[игнорируется]
609265
IT-Клоп  13.11.2023, 17:56
[игнорируется]
609255
Кусь  13.11.2023, 17:51
[игнорируется]
609249
...
Так это ж хорошо. Кафка - вообще замечательная система и её надо обязательно освоить, если сейчас работаешь с базами данных.
Кафка - это замечательная система. Я про энтерпрайзную джаву вообще. А если уж работаешь с базами данных, то вместе с кафкой заверните заодно и Debezium, если ты понимаешь о чём я. :)))

Клопег, тут на голый ПГ перейти походу в лом, а ты кафками какими-то ругаешься
АТО!

Клопег строил интеграцию postgres + wal2json + кафка коннект + debezium и всё это в Oracle и еще и дописывал фильтры для kafka connect на жабе, чтобы конвертировать дату, именования таблиц и прочую хрень.
Так именно за такое и платят бабло, fа не за pg_ctrl start )))
Сейчас уже с Oracle из debezium не поработаешь. Отключили они LogMiner c Oracle 21 вроде
urody.jpg
...
Рейтинг: 0 / 0
13.11.2023, 18:27
| Цитировать для копирования | Перейти в тему  
Просто Трёп / Буду тут работу искать
    #609311
IT-Клоп
Скрыть профиль Поместить в игнор-лист
IT-Клоп
Участник
я впрочем использовал коннектор debezium именно к postgresql, а в Oracle писал просто через JDBC, из кафки
...
Рейтинг: 0 / 0
13.11.2023, 18:32
| Цитировать для копирования | Ответы | Перейти в тему  
Просто Трёп / Буду тут работу искать
    #609380
IT-Клоп
Скрыть профиль Поместить в игнор-лист
IT-Клоп
Участник
Кусь  13.11.2023, 19:02
[игнорируется]
609375
IT-Клоп  13.11.2023, 18:32
[игнорируется]
609311
я впрочем использовал коннектор debezium именно к postgresql, а в Oracle писал просто через JDBC, из кафки
в Oracle ты писал через Kafka JDBC Sink connector (применяя Single Message Transformations, насколько я понял). Debezium тут ни при чём, как и CDC
да. А из Postgres - Debezium
...
Рейтинг: 0 / 0
13.11.2023, 19:04
| Цитировать для копирования | Ответы | Перейти в тему  
Просто Трёп / Буду тут работу искать
    #609382
IT-Клоп
Скрыть профиль Поместить в игнор-лист
IT-Клоп
Участник
два компонента: debezium PostgreSQL connector: интеграция Kafka и debezium PostgreSQL connector и JDBC Sink коннектор для Oracle
...
Рейтинг: 0 / 0
13.11.2023, 19:06
| Цитировать для копирования | Перейти в тему  
Просто Трёп / Буду тут работу искать
    #609398
IT-Клоп
Скрыть профиль Поместить в игнор-лист
IT-Клоп
Участник
Огрищще  13.11.2023, 19:08
[игнорируется]
609386
IT-Клоп  13.11.2023, 18:08
[игнорируется]
609269
Кусь  13.11.2023, 18:04
[игнорируется]
609265
IT-Клоп  13.11.2023, 17:56
[игнорируется]
609255
Кусь  13.11.2023, 17:51
[игнорируется]
609249
...
Так это ж хорошо. Кафка - вообще замечательная система и её надо обязательно освоить, если сейчас работаешь с базами данных.
Кафка - это замечательная система. Я про энтерпрайзную джаву вообще. А если уж работаешь с базами данных, то вместе с кафкой заверните заодно и Debezium, если ты понимаешь о чём я. :)))

Клопег, тут на голый ПГ перейти походу в лом, а ты кафками какими-то ругаешься
АТО!

Клопег строил интеграцию postgres + wal2json + кафка коннект + debezium и всё это в Oracle и еще и дописывал фильтры для kafka connect на жабе, чтобы конвертировать дату, именования таблиц и прочую хрень.
Так именно за такое и платят бабло, а не за pg_ctrl start )))
еббадь... В 1цэ это потихоньку всё и так впихивают под своими названиями, как я вижу. Точнее, уже давно впихнули.
там преимущество - что считываются изменения в виде WALов, то есть, это в теории самый скоростной режим репликации постгреса вовне.
А так то конечно есть много разных путей.
...
Рейтинг: 0 / 0
13.11.2023, 19:11
| Цитировать для копирования | Ответы | Перейти в тему  
Просто Трёп / Буду тут работу искать
    #609408
IT-Клоп
Скрыть профиль Поместить в игнор-лист
IT-Клоп
Участник
Голденгейт помимо того что платный - надо к нему иметь соответствующего специально обученного оракловода.
В общем, надо ещё ширше поддерживать этот цирк с конями. Так что это риск в плане сакнций, какой бы там не был заметчетельный этот голденгейт.
...
Рейтинг: 0 / 0
13.11.2023, 19:14
| Цитировать для копирования | Ответы | Перейти в тему  
Просто Трёп / Буду тут работу искать
    #609409
IT-Клоп
Скрыть профиль Поместить в игнор-лист
IT-Клоп
Участник
Кусь  13.11.2023, 19:12
[игнорируется]
609404
IT-Клоп  13.11.2023, 19:11
[игнорируется]
609398
Огрищще  13.11.2023, 19:08
[игнорируется]
609386
IT-Клоп  13.11.2023, 18:08
[игнорируется]
609269
Кусь  13.11.2023, 18:04
[игнорируется]
609265
...
АТО!

Клопег строил интеграцию postgres + wal2json + кафка коннект + debezium и всё это в Oracle и еще и дописывал фильтры для kafka connect на жабе, чтобы конвертировать дату, именования таблиц и прочую хрень.
Так именно за такое и платят бабло, а не за pg_ctrl start )))
еббадь... В 1цэ это потихоньку всё и так впихивают под своими названиями, как я вижу. Точнее, уже давно впихнули.
там преимущество - что считываются изменения в виде WALов, то есть, это в теории самый скоростной режим репликации постгреса вовне.
А так то конечно есть много разных путей.
У Debezium ограничение 7,000 change events per second для Postgres.
у нас по ТЗ влезала такая пропускная способность
...
Рейтинг: 0 / 0
13.11.2023, 19:14
| Цитировать для копирования | Перейти в тему  
7 сообщений из 32, страница 2 из 2
  2  все
Форумы / Просто Трёп [закрыт для гостей] / Буду тут работу искать, Поиск: Искать сообщения, созданные автором: IT-Клоп  
Читали тему (5): Анонимы (5)
Игнорируют тему (2): Гарыныч, Redd
Заблокированы в теме (2): Redd, Королева Жезлов
Читали форум (113): Анонимы (111), XEugene 4 мин., sergey11 4 мин.
Пользователи онлайн (143): Анонимы (139), Yandex Bot, Bing Bot 3 мин., XEugene 4 мин., sergey11 4 мин.
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Польз. соглашение
ReSQL.ru, Чоткий форум, Чат Кролика       Пашэ: Рисунки, Чат       Деда: Фотоальбом, Встречи
Закрыть
Start [/forum/search.php?do_search=1&tid=13731&author_mode=wrote_post&author=IT-%D0%9A%D0%BB%D0%BE%D0%BF&start_from=609382]:
 0ms
get settings:
 1ms
get forum list:
 5ms
searching:
 18ms
get settings:
 0ms
get forum list:
 5ms
get topic data:
 2ms
check forum access:
 0ms
check topic access:
 0ms
get forum data:
 0ms
get found posts:
 24ms
track hit:
 19ms
get online users:
 54ms
check new:
 164ms
others: 248ms
total:  540ms
созд. / загр.: 540ms (нв.: 164ms)
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]