Изменения документа Примеры
Редактировал(а) Alexandr Fokin 2026/05/09 02:00
От версии 8.16
отредактировано Alexandr Fokin
на 2026/05/05 18:25
на 2026/05/05 18:25
Изменить комментарий:
К данной версии нет комментариев
К версии 8.3
отредактировано Alexandr Fokin
на 2026/04/29 11:24
на 2026/04/29 11:24
Изменить комментарий:
К данной версии нет комментариев
Сводка
-
Свойства страницы (1 изменено, 0 добавлено, 0 удалено)
-
Объекты (0 изменено, 0 добавлено, 1 удалено)
Подробности
- Свойства страницы
-
- Содержимое
-
... ... @@ -1,9 +1,7 @@ 1 -|1|(% style="width:188px" %)1 родительский процесс и N дочерних процессов.|(% style="width:1268px" %)((( 2 -|В данном примере имеется в виду, что дочерние процессы могут выполняться параллельно другу и независимо друг от друга, но в конце должны оповестить родительский процесс о необходимости продолжения обработки. 3 -Если речь идет о каких-либо зависимостях порядка выполнения в дочерних процессах, то это может контролировать дочерний процесс (выделяя группу, которую сейчас можно запустить и ожидая окончания). 1 +|1|Родительский процесс, N дочерних процессов.|((( 4 4 |((( 5 - |(((6 - Вариант1:CounterTrigger.3 +В данном примере имеется в виду, что дочерние процессы могут выполняться параллельно другу и независимо друг от друга, но в конце должны оповестить родительский процесс о необходимости продолжения обработки. 4 +Если речь идет о каких-либо зависимостях порядка выполнения в дочерних процессах, то это может контролировать дочерний процесс (выделяя группу, которую сейчас можно запустить и ожидая окончания). 7 7 ))) 8 8 |((( 9 9 1. Родительский процесс создает триггер со счетчиком N, создает и запускает дочерние процессы, засыпает. ... ... @@ -21,36 +21,14 @@ 21 21 ))) 22 22 |[[image:Родительский дочерний процесс. Sequence.jpg]] 23 23 ))) 24 -|((( 25 -Вариант №2: 26 - 27 -Мы просто ставит timerTrigger на условно 1-5-10 минут (насколько важна задержка) и перепроверяем условие завершения. 28 -В этом случае будет 29 - 30 -* Из минус: что родительский процесс узнает о завершении дочерних процессов с задержкой (хотя в задержке можно использовать функцию от количества необработанных дочерних процессов, но тогда нужно считать количество или хотя бы что оно не больше N). 31 -* Из плюсов: будет меньше пишущей нагрузки на БД (но больше читающей - на проверку) т.к. у нас не будет CounterTrigger, но будет периодический запрос на проверку завершения всех дочерних процессов (аналогично страхующему триггер). \ 32 -))) 33 -|((( 34 -Вариант №3: 35 - 36 -Дочерние процессы выполняются через родительский (ограничение в рамках одной ноды). 37 -Точкой выполнения является родительский процесс, который внутри себя (параллельно или последовательно) выполняет дочерние процессы. 38 -За счет такого способа у нас также отсутствует конкуренция передачи сигнала в родительский процесс. 39 -Но мы ограничены выполнением дочерних процессов одной одной сервиса. 40 -Сложнее контролировать распределение нагрузки, если будет вложенный параллелизм. 41 -Также решает проблему, если дочерний процесс содержит ожидание (например асинхронный запрос-ответ), тут будет конкуренция сигнала от хендлера ответа к родительскому процессу. 42 -))) 43 -))) 44 -|2|(% style="width:188px" %)Transaction outbox stream process.|(% style="width:1268px" %)[[image:TransactionOutbox. Sequence.jpg]] 45 -|3|(% style="width:188px" %)Stream trigger|(% style="width:1268px" %)((( 22 +|2|Transaction outbox stream process.|[[image:TransactionOutbox. Sequence.jpg]] 23 +|3|Stream trigger|((( 46 46 | |((( 47 47 * Позволяет убрать лишние запросы пробуждения процесса (когда он и так запущен). 48 -* __Позволяет полностью убрать задержку после остановки процесса__(если есть новое сообщения, то он сразу же будет пробужден).26 +* Позволяет полностью убрать задержку после остановки процесса (если есть новое сообщения, то он сразу же будет пробужден). 49 49 За счет того, что триггер точно знает, что есть новые сообщения и процесс только что уснул. 50 50 * Вводит 2 типа события, 1 сигнал о новом сообщении (содержит offset значение), 2 - процесс идет спать (содержит offset значение). 51 51 * Вводит дополнительное состояние в триггер: максимальный offset сообщения, максимальный offset обработанного процессом сообщения, флаг состояния сна процесса. 52 -* В некоторых случаях позволяет не выполнять wakeup код в конце сессии обработки (если отключить wakeup, оставить только stream trigger) 53 -(блокировка и обновление wakeup entity, проверка wakeup условия), __улучшает перформанс такта работы__. 54 54 ))) 55 55 |Алгоритм триггера.|((( 56 56 * При получении события о засыпании процесса: ... ... @@ -66,16 +66,17 @@ 66 66 Если есть сообщения со смещением больше чем указал процесс, то делает гарантированное пробуждение процесса. 67 67 Когда поступает сигнал о новом сообщении (от отправителя сообщения), то обновляет данные о максимальном смещении и пробуждает процесс, если он спит 68 68 ))) 69 -| Заготовка|[[https:~~/~~/github.com/cccc1808/cccc1808.ProcessEngine/tree/cccc1808/feature/trigger_stream_trigger>>https://github.com/cccc1808/cccc1808.ProcessEngine/tree/cccc1808/feature/trigger_stream_trigger]]45 +| |TODO: 70 70 ))) 71 -|4| (% style="width:188px" %)Групповое действие|(% style="width:1268px" %)(((72 -| |Действие, которое нужно применить к диапазону строк (сравнительно большому), независимо для каждой строки.73 -Наличие у строк упорядоченного столбца (для выделения диапазонов).47 +|4|Групповое действие|((( 48 +| |Действие, которое нужно применить к диапазону строк, независимо для каждой строки. 49 +Наличие у строк упорядоченного столбца. 74 74 | |((( 75 75 |(% style="width:888px" %)Родительские процесс определяет границы диапазона [min, max].|(% style="width:266px" %){{code language="none"}}select min(), max() 76 76 where condition(){{/code}} 77 77 |(% style="width:888px" %)Родительский процесс нарезает диапазон [min, max] на поддиапазоны. На каждый поддиапазон создается дочерний процесс.|(% style="width:266px" %) 78 78 |(% style="width:888px" %)Каждый дочерний процесс обрабатывает свой поддиапазон строк (параллельно).|(% style="width:266px" %)Внутри поддиапазона может использоваться keyset пагинация. 79 -|(% style="width:888px" %)Родительский процесс ожидает завершения дочерних процессов (см.пример 1).|(% style="width:266px" %)55 +|(% style="width:888px" %)Родительский процесс ожидает завершения дочерних процессов.|(% style="width:266px" %) 80 80 ))) 57 +| | 81 81 )))
- XWiki.XWikiComments[0]
-
- Автор
-
... ... @@ -1,1 +1,0 @@ 1 -XWiki.cccc1808 - Комментарий
-
... ... @@ -1,4 +1,0 @@ 1 -Замечание: конфигурация задержки trigger consumer вычитывания и накопления батча trigger events. 2 - 3 -* Для примера 1 предпочтительная более большая задержка т.к. это уменьшит нагрузку на БД (агрегирует больше сигналов от дочерних процессов в одну операцию обновления). Throughput. 4 -* Для примера 3 в контексте inbox stream trigger, может быть предпочтительная более низкая задержка, чтобы не раздувать задержку от поступления сообщения до его обработки. Latency. - Дата
-
... ... @@ -1,1 +1,0 @@ 1 -2026-05-01 15:36:23.922