Изменения документа Apache Kafka
Редактировал(а) Alexandr Fokin 2024/09/07 11:00
<
>
отредактировано Alexandr Fokin
на 2020/08/15 22:23
на 2020/08/15 22:23
отредактировано Alexandr Fokin
на 2020/08/15 20:12
на 2020/08/15 20:12
Изменить комментарий:
К данной версии нет комментариев
Комментарий
-
Свойства страницы (1 изменено, 0 добавлено, 0 удалено)
-
Объекты (0 изменено, 1 добавлено, 0 удалено)
Подробности
- Свойства страницы
-
- Содержимое
-
... ... @@ -13,6 +13,31 @@ 13 13 Partition (Topic может содержаться несколько разделов, позволяющих работать параллельно нескольким Consumer) (Данные находящиеся в разных partition одного topic не дублируют друг друга) 14 14 CosumerGroup (Consumers, находящиеся в разных CosumerGroup, читают данные параллельно и независимо друг от друга. (Получают одни и те же сообщения)) (В рамках одной ConsumerGroup кол-во активных Consumer не может быть больще чем кол-во partitions. Неактивные Consumer могут быть резервными и автоматически будут подключены, если активный Consumer выйдет из строя) 15 15 16 +Простой запуст на Windows: 17 +1) Раскоменнтировать и изменить строки в файле: 18 +kafka_2.12-2.4.0\config\server.properties 19 +listeners=PLAINTEXT://127.0.0.1:9092 20 +advertised.listeners=PLAINTEXT://127.0.0.1:9092 21 + 22 +2) Запустить ZooKeeper 23 +{{code language="cmd"}} 24 +kafka_2.12-2.4.0\bin\windows\zookeeper-server-start.bat "kafka_2.12-2.4.0\config\zookeeper.properties" 25 +{{/code}} 26 + 27 +3) Запустить Kafka 28 +{{code language="cmd"}} 29 +kafka_2.12-2.4.0\bin\windows\kafka-server-start.bat "kafka_2.12-2.4.0\config\server.properties" 30 +{{/code}} 31 + 32 +При запуске на Windows у ApacheKafka есть проблемы связанные с блокировкой файлов. 33 +Ошибка проявляется при быстрой манипуляции с топиками (создание/удаление). 34 +При появлении ошибки можно удалить папку tmp и перезапустить. 35 +https://stackoverflow.com/questions/50755827/accessdeniedexception-when-deleting-a-topic-on-windows-kafka 36 + 37 +Для взаимодействия с ApacheKafka можное использовать консоль. Управляющие скрипты распологаются в папке: 38 +kafka_2.12-2.4.0\bin\windows 39 + 40 + 16 16 Статьи: 17 17 https://habr.com/ru/company/avito/blog/465315/ 18 18 https://ksqldb.io/quickstart.html ... ... @@ -28,7 +28,9 @@ 28 28 29 29 Клиенты: 30 30 [[confluentinc/confluent-kafka-dotnet>>https://github.com/confluentinc/confluent-kafka-dotnet]] 56 +[[Jroland/kafka-net>>https://github.com/Jroland/kafka-net]] 31 31 58 + 32 32 KafkaConsoleTool: 33 33 https://riptutorial.com/apache-kafka/topic/8990/kafka-console-tools 34 34 https://medium.com/@TimvanBaarsen/apache-kafka-cli-commands-cheat-sheet-a6f06eac01b
- XWiki.XWikiComments[0]
-
- Автор
-
... ... @@ -1,0 +1,1 @@ 1 +XWiki.cccc1808 - Комментарий
-
... ... @@ -1,0 +1,3 @@ 1 +Простой способ сбросить состояние тестового локального инстанса - удалить содержимое папок: 2 +Drive:\tmp\kafka-logs 3 +Drive:\tmp\zookeeper - Дата
-
... ... @@ -1,0 +1,1 @@ 1 +2020-02-17 18:32:54.563