Вопросы по теме 'apache-kafka'
Почему при выполнении приложения структурированной потоковой передачи происходит сбой с ошибкой «Не удалось найти источник данных: kafka»?
Я пытаюсь подключить структурированную потоковую передачу Spark к kafka, и она выдает следующую ошибку:
Исключение в потоке «основной» java.lang.ClassNotFoundException: не удалось найти источник данных: kafka. Пожалуйста, найдите пакеты в ......
2328 просмотров
schedule
15.05.2024
Настройка кластера Kafka Connect или запуск подключенных воркеров
Я прохожу через kafka connect, и я пытаюсь понять концепции.
Допустим, у меня есть кластер kafka (узлы k1, k2 и k3), и он запущен, теперь я хочу запустить рабочих kafka connect на разных узлах, скажем, c1 и c2 в распределенном режиме.
Несколько...
4735 просмотров
schedule
22.04.2024
Ошибка SSL kafka-connect при использовании открытого текста
Я следую этому руководству: https://docs.confluent.io/4.0.0/installation/docker/docs/tutorials/connect-avro-jdbc.html
и поместите здесь свой код: https://github.com/lexsteens/kafka-connect-tutorial
У меня проблема при регистрации коннектора...
1245 просмотров
schedule
19.05.2024
Apache Kafka — повторяющаяся перебалансировка с большим количеством потребителей
Контекст
Мы используем Kafka для обработки больших сообщений, очень редко до 10 МБ, но в основном в диапазоне 500 КБ. Обработка сообщения может занять до 30 секунд, но иногда и минуту.
Проблема
Обработка данных с меньшим количеством...
1842 просмотров
schedule
26.05.2024
Как мне установить свойства производителя kafka для атомарного потребителя kafka
Я просматривал эту статью , которая объясняет, как гарантировать, что сообщение обрабатывается ровно один раз, выполнив следующие действия:
Чтение (тема, раздел, смещение) из базы данных при запуске / перезапуске
Прочитать сообщение из...
305 просмотров
schedule
03.06.2024