Изменения документа Apache Kafka
Редактировал(а) Alexandr Fokin 2024/09/07 11:00
<
>
отредактировано Alexandr Fokin
на 2021/01/05 15:51
на 2021/01/05 15:51
отредактировано Alexandr Fokin
на 2020/08/15 22:23
на 2020/08/15 22:23
Изменить комментарий:
К данной версии нет комментариев
Комментарий
-
Свойства страницы (3 изменено, 0 добавлено, 0 удалено)
-
Объекты (1 изменено, 1 добавлено, 0 удалено)
Подробности
- Свойства страницы
-
- Родительский документ
-
... ... @@ -1,1 +1,1 @@ 1 -Разработка. Брокерысообщений.WebHome1 +Разработка.Очереди сообщений.WebHome - Теги
-
... ... @@ -1,1 +1,1 @@ 1 -Apache|Kafka |БрокерСообщений1 +Apache|Kafka - Содержимое
-
... ... @@ -25,9 +25,22 @@ 25 25 https://github.com/wurstmeister/kafka-docker 26 26 https://github.com/lensesio/fast-data-dev 27 27 28 + 28 28 Клиенты: 29 29 [[confluentinc/confluent-kafka-dotnet>>https://github.com/confluentinc/confluent-kafka-dotnet]] 30 30 32 +KafkaConsoleTool: 33 +https://riptutorial.com/apache-kafka/topic/8990/kafka-console-tools 34 +https://medium.com/@TimvanBaarsen/apache-kafka-cli-commands-cheat-sheet-a6f06eac01b 35 +https://howtoprogram.xyz/2016/07/08/apache-kafka-command-line-interface/ 36 +https://help.aiven.io/en/articles/2661525-viewing-and-resetting-consumer-group-offsets 37 + 38 +https://stackoverflow.com/questions/32697999/kafka-consumer-list 39 +https://stackoverflow.com/questions/35437681/kafka-get-partition-count-for-a-topic 40 +https://stackoverflow.com/questions/14755030/apache-kafka-consumer-state 41 +https://stackoverflow.com/questions/28156227/kafka-consumer-group-creation-with-specific-offset 42 + 43 + 31 31 Understanding Kafka partition assignment strategies and how to write your own custom assignor 32 32 https://medium.com/streamthoughts/understanding-kafka-partition-assignment-strategies-and-how-to-write-your-own-custom-assignor-ebeda1fc06f3 33 33
- XWiki.XWikiComments[3]
-
- Комментарий
-
... ... @@ -1,8 +1,14 @@ 1 -Что такое гарантия доставки сообщений или как избавиться от дублей и потерь в Apache Kafka и других Big Data брокерах 2 -https://www.bigdataschool.ru/blog/kafka-exactly-once.html 1 +{{code language="cmd"}} 2 +Список топиков 3 +kafka-topics.bat --bootstrap-server <server> --list 3 3 4 -К ак ускоритьработу producer’ов Kafka: параметры конфигурации производителей5 - https://www.bigdataschool.ru/blog/kafka-producers-configuration.html5 +Консольный consumer 6 +kafka-console-consumer.bat --bootstrap-server <server> --topic <topic> --from-beginning 6 6 7 -Почему ваша Kafka такая медленная и как ее ускорить: 7 главных факторов производительности этой Big Data системы 8 -https://www.bigdataschool.ru/blog/kafka-performance-factors.html 8 +Данные по ConsumerGroup(текущее смещение) 9 +kafka-consumer-groups.bat --describe --group <ConsumerGroupId> --bootstrap-server <server> 10 + 11 +Удалить ConsumerGroup(смещения по группе) 12 +kafka-consumer-groups.bat --bootstrap-server <server> --delete --group <ConsumerGroupId> 13 +{{/code}} 14 + - Дата
-
... ... @@ -1,1 +1,1 @@ 1 -2020-0 9-23 11:04:41.8131 +2020-03-05 19:11:35.57
- XWiki.XWikiComments[4]
-
- Автор
-
... ... @@ -1,0 +1,1 @@ 1 +XWiki.cccc1808 - Комментарий
-
... ... @@ -1,0 +1,5 @@ 1 +Вариант использования. 2 +В очереди скопилось много сообщений, которые можно пропустить. Необходимо начать читать свежие сообщения. 3 + 4 +1) Удалить ConsumerGroup. 5 +2) Подключить Consumer с заданным параметром AutoOffsetReset. (значение параметра - задать смещение с конца) - Дата
-
... ... @@ -1,0 +1,1 @@ 1 +2020-06-30 10:02:02.880