Изменения документа Apache Kafka

Редактировал(а) Alexandr Fokin 2024/09/07 11:00
<
От версии < 29.6 >
отредактировано Alexandr Fokin
на 2022/10/28 15:23
К версии < 29.10 >
отредактировано Alexandr Fokin
на 2022/10/28 15:26
>
Изменить комментарий: Редактировать комментарий

Комментарий

Подробности

XWiki.XWikiComments[1]
Автор
... ... @@ -1,1 +1,0 @@
1 -XWiki.cccc1808
Комментарий
... ... @@ -1,7 +1,0 @@
1 -Если запросить группу сообщений и выполнить коммит последнего, то смещение установиться на позиции последнего элемента +1.
2 -Нет возможности закоммитить только определенное [i] сообщение.
3 -
4 -Некоторые другие брокеры устроены иначе: они работают с отдельными сообщениями и позволяют подтверждать их потребление независимо. В Kafke же единственным критерием является Offset.
5 -
6 -Опциально можно реализовать собственную логику работы с сообщениями, в том числе не возлагая на броке обязанности контролировать смещение, а управляя чтением самостоятельно.
7 -Обычно в Kafka не предполагается, что сообщение будет удалено сразу, и к нему можно обращаются по его значению Offset.
Дата
... ... @@ -1,1 +1,0 @@
1 -2020-02-17 18:44:48.607
XWiki.XWikiComments[2]
Автор
... ... @@ -1,1 +1,0 @@
1 -XWiki.cccc1808
Комментарий
... ... @@ -1,3 +1,0 @@
1 -При первом подключении Consumer по умолчанию подсоединиться к концу топика
2 -и не прочитает сообщения, уже имеющиеся в топике.
3 -(параметр AutoOffsetReset)
Дата
... ... @@ -1,1 +1,0 @@
1 -2020-03-03 20:29:19.403
XWiki.XWikiComments[3]
Комментарий
... ... @@ -1,8 +1,0 @@
1 -Что такое гарантия доставки сообщений или как избавиться от дублей и потерь в Apache Kafka и других Big Data брокерах
2 -https://www.bigdataschool.ru/blog/kafka-exactly-once.html
3 -
4 -Как ускорить работу producer’ов Kafka: параметры конфигурации производителей
5 -https://www.bigdataschool.ru/blog/kafka-producers-configuration.html
6 -
7 -Почему ваша Kafka такая медленная и как ее ускорить: 7 главных факторов производительности этой Big Data системы
8 -https://www.bigdataschool.ru/blog/kafka-performance-factors.html
XWiki.XWikiComments[4]
Комментарий
... ... @@ -1,7 +1,0 @@
1 -Изменение параметра максимального размера сообщения:
2 -
3 -Kafka - Broker: Message size too large
4 -https://stackoverflow.com/questions/59322133/kafka-broker-message-size-too-large
5 -
6 -Increase message.max.bytes
7 -https://github.com/bitnami/bitnami-docker-kafka/issues/13