Комментарий

• Свойства страницы (1 изменено, 0 добавлено, 0 удалено)

Подробности

Свойства страницы

Содержимое

...	...	@@ -13,31 +13,6 @@
13	13	Partition (Topic может содержаться несколько разделов, позволяющих работать параллельно нескольким Consumer) (Данные находящиеся в разных partition одного topic не дублируют друг друга)
14	14	CosumerGroup (Consumers, находящиеся в разных CosumerGroup, читают данные параллельно и независимо друг от друга. (Получают одни и те же сообщения)) (В рамках одной ConsumerGroup кол-во активных Consumer не может быть больще чем кол-во partitions. Неактивные Consumer могут быть резервными и автоматически будут подключены, если активный Consumer выйдет из строя)
15	15
16		-Простой запуст на Windows:
17		-1) Раскоменнтировать и изменить строки в файле:
18		-kafka_2.12-2.4.0\config\server.properties
19		-listeners=PLAINTEXT://127.0.0.1:9092
20		-advertised.listeners=PLAINTEXT://127.0.0.1:9092
21		-
22		-2) Запустить ZooKeeper
23		-{{code language="cmd"}}
24		-kafka_2.12-2.4.0\bin\windows\zookeeper-server-start.bat "kafka_2.12-2.4.0\config\zookeeper.properties"
25		-{{/code}}
26		-
27		-3) Запустить Kafka
28		-{{code language="cmd"}}
29		-kafka_2.12-2.4.0\bin\windows\kafka-server-start.bat "kafka_2.12-2.4.0\config\server.properties"
30		-{{/code}}
31		-
32		-При запуске на Windows у ApacheKafka есть проблемы связанные с блокировкой файлов.
33		-Ошибка проявляется при быстрой манипуляции с топиками (создание/удаление).
34		-При появлении ошибки можно удалить папку tmp и перезапустить.
35		-https://stackoverflow.com/questions/50755827/accessdeniedexception-when-deleting-a-topic-on-windows-kafka
36		-
37		-Для взаимодействия с ApacheKafka можное использовать консоль. Управляющие скрипты распологаются в папке:
38		-kafka_2.12-2.4.0\bin\windows
39		-
40		-
41	41	Статьи:
42	42	https://habr.com/ru/company/avito/blog/465315/
43	43	https://ksqldb.io/quickstart.html
...	...	@@ -50,24 +50,9 @@
50	50	https://github.com/wurstmeister/kafka-docker
51	51	https://github.com/lensesio/fast-data-dev
52	52
53		-
54	54	Клиенты:
55	55	[[confluentinc/confluent-kafka-dotnet>>https://github.com/confluentinc/confluent-kafka-dotnet]]
56		-[[Jroland/kafka-net>>https://github.com/Jroland/kafka-net]]
57	57
58		-
59		-KafkaConsoleTool:
60		-https://riptutorial.com/apache-kafka/topic/8990/kafka-console-tools
61		-https://medium.com/@TimvanBaarsen/apache-kafka-cli-commands-cheat-sheet-a6f06eac01b
62		-https://howtoprogram.xyz/2016/07/08/apache-kafka-command-line-interface/
63		-https://help.aiven.io/en/articles/2661525-viewing-and-resetting-consumer-group-offsets
64		-
65		-https://stackoverflow.com/questions/32697999/kafka-consumer-list
66		-https://stackoverflow.com/questions/35437681/kafka-get-partition-count-for-a-topic
67		-https://stackoverflow.com/questions/14755030/apache-kafka-consumer-state
68		-https://stackoverflow.com/questions/28156227/kafka-consumer-group-creation-with-specific-offset
69		-
70		-
71	71	Understanding Kafka partition assignment strategies and how to write your own custom assignor
72	72	https://medium.com/streamthoughts/understanding-kafka-partition-assignment-strategies-and-how-to-write-your-own-custom-assignor-ebeda1fc06f3
73	73