Изменения документа Apache Kafka
Редактировал(а) Alexandr Fokin 2024/09/07 11:00
<
>
отредактировано Alexandr Fokin
на 2020/06/07 12:08
на 2020/06/07 12:08
отредактировано Alexandr Fokin
на 2020/04/05 20:37
на 2020/04/05 20:37
Изменить комментарий:
К данной версии нет комментариев
Комментарий
-
Свойства страницы (1 изменено, 0 добавлено, 0 удалено)
-
Объекты (1 изменено, 0 добавлено, 0 удалено)
Подробности
- Свойства страницы
-
- Содержимое
-
... ... @@ -1,17 +1,17 @@ 1 1 2 2 https://kafka.apache.org/ 3 3 4 -ПО :5 - **Zookeeper**4 +ПО 5 +Zookeeper 6 6 Zookeeper выполняет роль хранилища метаданных и координатора. Также именно к zookeeper сперва пойдут producer и consumer, чтобы узнать, на каком брокере какие топики и партиции хранятся. 7 7 В более старых версиях Kafka zookeeper отвечал и за хранение оффсетов, но сейчас они хранятся в специальном топике __consumer_offsets на брокере 8 +Apache Kafka 8 8 9 -**Apache Kafka** 10 -Producer (Отправитель) 11 -Consumer (Получатель) 12 -Topic (Отчасти схож с очередью) 13 -Partition (Topic может содержаться несколько разделов, позволяющих работать параллельно нескольким Consumer) 14 -CosumerGroup (Consumers, находящиеся в разных CosumerGroup, читают данные параллельно и независимо друг от друга. (Получают одни и те же сообщения)) 10 +Producer (Приложение-отправитель) 11 +Consumer (Приложение-получатель) 12 +Topic 13 +Partition 14 +CosumerGroup 15 15 16 16 Простой запуст на Windows: 17 17 1) Раскоменнтировать и изменить строки в файле: ... ... @@ -29,16 +29,9 @@ 29 29 kafka_2.12-2.4.0\bin\windows\kafka-server-start.bat "kafka_2.12-2.4.0\config\server.properties" 30 30 {{/code}} 31 31 32 - 33 -Для взаимодействия с ApacheKafka можное использовать консоль. Управляющие скрипты распологаются в папке: 34 -kafka_2.12-2.4.0\bin\windows 35 - 36 - 37 37 Статьи: 38 38 https://habr.com/ru/company/avito/blog/465315/ 39 -https://ksqldb.io/quickstart.html 40 40 41 - 42 42 Развертывание: 43 43 [[bitnami.com | kafka (Docker, VM)>>https://bitnami.com/stack/kafka]] 44 44 https://github.com/wurstmeister/kafka-docker
- XWiki.XWikiComments[3]
-
- Комментарий
-
... ... @@ -1,5 +5,3 @@ 1 -{{code language="cmd"}} 2 -kafka-console-consumer.bat --bootstrap-server <server> --topic <topic> --from-beginning 3 -kafka-topics.bat --bootstrap-server <server> --list 4 -{{/code}} 5 5 2 +"kafka-console-consumer.bat --bootstrap-server <server> --topic <topic> --from-beginning" 3 +"kafka-topics.bat --bootstrap-server <server> --list"