Изменения документа Apache Kafka
Редактировал(а) Alexandr Fokin 2024/09/07 11:00
<
>
отредактировано Alexandr Fokin
на 2020/06/07 12:04
на 2020/06/07 12:04
отредактировано Alexandr Fokin
на 2020/03/05 19:11
на 2020/03/05 19:11
Изменить комментарий:
Редактировать комментарий
Комментарий
-
Свойства страницы (1 изменено, 0 добавлено, 0 удалено)
-
Объекты (1 изменено, 0 добавлено, 0 удалено)
Подробности
- Свойства страницы
-
- Содержимое
-
... ... @@ -1,17 +1,17 @@ 1 1 2 2 https://kafka.apache.org/ 3 3 4 -ПО :5 - **Zookeeper**4 +ПО 5 +Zookeeper 6 6 Zookeeper выполняет роль хранилища метаданных и координатора. Также именно к zookeeper сперва пойдут producer и consumer, чтобы узнать, на каком брокере какие топики и партиции хранятся. 7 7 В более старых версиях Kafka zookeeper отвечал и за хранение оффсетов, но сейчас они хранятся в специальном топике __consumer_offsets на брокере 8 +Apache Kafka 8 8 9 -**Apache Kafka** 10 -Producer (Отправитель) 11 -Consumer (Получатель) 12 -Topic (Отчасти схож с очередью) 13 -Partition (Topic может содержаться несколько разделов, позволяющих работать параллельно нескольким Consumer) 14 -CosumerGroup (Consumers, находящиеся в разных CosumerGroup, читают данные параллельно и независимо друг от друга. (Получают одни и те же сообщения)) 10 +Producer (Приложение-отправитель) 11 +Consumer (Приложение-получатель) 12 +Topic 13 +Partition 14 +CosumerGroup 15 15 16 16 Простой запуст на Windows: 17 17 1) Раскоменнтировать и изменить строки в файле: ... ... @@ -20,23 +20,14 @@ 20 20 advertised.listeners=PLAINTEXT://127.0.0.1:9092 21 21 22 22 2) Запустить ZooKeeper 23 -{{code language="cmd"}} 24 24 kafka_2.12-2.4.0\bin\windows\zookeeper-server-start.bat "kafka_2.12-2.4.0\config\zookeeper.properties" 25 -{{/code}} 26 - 24 + 27 27 3) Запустить Kafka 28 -{{code language="cmd"}} 29 29 kafka_2.12-2.4.0\bin\windows\kafka-server-start.bat "kafka_2.12-2.4.0\config\server.properties" 30 -{{/code}} 31 31 32 32 33 -Для взаимодействия с ApacheKafka можное использовать консоль. Управляющие скрипты распологаются в папке: 34 -kafka_2.12-2.4.0\bin\windows 35 - 36 - 37 37 Статьи: 38 38 https://habr.com/ru/company/avito/blog/465315/ 39 -[[ksqlDB>>https://ksqldb.io/quickstart.html]] 40 40 41 41 Развертывание: 42 42 [[bitnami.com | kafka (Docker, VM)>>https://bitnami.com/stack/kafka]]
- XWiki.XWikiComments[3]
-
- Комментарий
-
... ... @@ -1,5 +5,3 @@ 1 -{{code language="cmd"}} 2 -kafka-console-consumer.bat --bootstrap-server <server> --topic <topic> --from-beginning 3 -kafka-topics.bat --bootstrap-server <server> --list 4 -{{/code}} 5 5 2 +"kafka-console-consumer.bat --bootstrap-server <server> --topic <topic> --from-beginning" 3 +"kafka-topics.bat --bootstrap-server <server> --list"