Изменения документа Elastic Search
Редактировал(а) Alexandr Fokin 2024/01/08 19:48
<
>
отредактировано Alexandr Fokin
на 2022/08/13 16:56
на 2022/08/13 16:56
отредактировано Alexandr Fokin
на 2023/12/16 14:00
на 2023/12/16 14:00
Изменить комментарий:
Update document after refactoring.
Комментарий
-
Свойства страницы (4 изменено, 0 добавлено, 0 удалено)
-
Объекты (1 изменено, 1 добавлено, 0 удалено)
Подробности
- Свойства страницы
-
- Название
-
... ... @@ -1,1 +1,1 @@ 1 -ElasticSearch 1 +Elastic Search - Родительский документ
-
... ... @@ -1,1 +1,1 @@ 1 -Разработка.Базы данных.NoSQL.Документоориентированная структура.WebHome 1 +Разработка.Базы данных 2.NoSQL.Документоориентированная структура.WebHome - Теги
-
... ... @@ -1,1 +1,1 @@ 1 -NoSql| ElasticSearch1 +NoSql|Full text search|json - Содержимое
-
... ... @@ -1,52 +1,31 @@ 1 1 ==== ElasticSearch ==== 2 2 3 -NoSql база данных для хранения документов. Одно из основных функций - возможность выполнения полнотекстового поискапо документа.4 -В качестве интерфейса взаимодействия выступает HTTP Api. 5 -Написан на [[Java>>Разработка.JVM.Java.WebHome]], на основ ебиблиотеки [[Apache Lucene>>Разработка.JVM.Java.Библиотеки.Apache Lucene.WebHome]].3 +NoSql база данных для хранения документов. Одно из основных функций - возможность выполнения [[Полнотекстовый поиск>>doc:Алгоритмы.Задача\. Поиск.Полнотекстовый поиск.WebHome]] по документам. 4 +В качестве интерфейса взаимодействия выступает [[HTTP 1.1>>Сети.Протоколы.HTTP 1\.1.WebHome]] Api. 5 +Написан на [[Java>>Разработка.JVM.Java.WebHome]], механизм поискового движка основан на библиотеки [[Apache Lucene>>Разработка.JVM.Java.Библиотеки.Apache Lucene.WebHome]], для логирования используется [[Apache Log4j>>doc:Разработка.JVM.Java.Библиотеки.Apache Log4j.WebHome]]. 6 6 7 7 ---- 8 8 9 -==== Структурныеэлементы ====9 +==== Внутренние ссылки: ==== 10 10 11 -|(% style="width:364px" %) |(% style="width:1158px" %) 12 -|(% style="width:364px" %)Индекс ~| Index|(% style="width:1158px" %)Содержит группу Типов. 13 -Упрощенно аналог БД. 14 -|(% style="width:364px" %)Тип ~| Type|(% style="width:1158px" %)((( 15 -Содержит группу Документов и метаданные Маппинг. 16 -Упрощенно - аналог таблицы. 11 +====== Дочерние страницы: ====== 17 17 18 -Предполагает группировку документов с единой структурой. 19 -))) 20 -|(% style="width:364px" %)Маппинг ~| Mapping|(% style="width:1158px" %)((( 21 -Содержащий информацию о структуре всех документов внутри Типа. 22 -Для каждого поля в документах типа определяется его тип данных, которые влияет на то, как поле будет использоваться с точки зрения поиска. При этом пытаясь автоматически определить тип данных. 13 +{{children/}} 23 23 24 -В случае добавления нового документа с полем, сведений о котором нет в маппинге, метаданные о поле автоматически заносяться в маппинг. 25 -Добавление документа, содержащего поле с типом данных, отличным от метаданных в маппинге, приведет к ошибке. 26 -))) 27 -|(% style="width:364px" %)Документ|(% style="width:1158px" %)((( 28 -Принадлежит 1 группе. 29 -Уникально определяется совокупностью идентификаторов <IndexName>.<TypeName>.<DocumentId>. 30 -Имеет номер версии, которая автоматически инкрементируется при обновлении документа. 31 -DocumentId может генерироваться как клиентом, так и сервером. 32 -))) 33 -|(% style="width:364px" %) |(% style="width:1158px" %) 34 -|(% style="width:364px" %)Операция добавления (индексирования) документа.|(% style="width:1158px" %)При добавлении для документа определяется шард для размещения. Сначала документ отправляется на Master экземпляр шарда, а от него также распространяется на Slave копии шарда. 35 -|(% style="width:364px" %)Операция поиска.|(% style="width:1158px" %)Может осуществляться как в рамках одного конкретного Типа, так и на уровне Типов, расположенных в различных Индексах. 36 -|(% style="width:364px" %) |(% style="width:1158px" %) 37 -|(% style="width:364px" %)Механизм масштабирования и отказоустойчивости.|(% style="width:1158px" %)((( 38 -Несколько узлов объединяются в кластер. Клиентские приложения могут взаимодействовать с любой из нод кластера. 39 -Поддерживается шардинг - разбиение данных на блоки и распределение их по узлам кластера. 40 -Для каждого шарда можно назначать кол-во реплик, копий. При этом среди репликаций один шард будем master, а остальные slave. 15 +====== Обратные ссылки: ====== 41 41 42 -Рекомендуется наличие быстрого и надежного сетевого соединения между узлами кластера. (split brain дописать позже). 17 +{{velocity}} 18 +#set ($links = $doc.getBacklinks()) 19 +#if ($links.size() > 0) 20 + #foreach ($docname in $links) 21 + #set ($rdoc = $xwiki.getDocument($docname).getTranslatedDocument()) 22 + * [[$escapetool.xml($rdoc.fullName)]] 23 + #end 24 +#else 25 + No back links for this page! 26 +#end 27 +{{/velocity}} 43 43 44 -Параметры кол-ва шардов и реплик определяются на уровне Индекса. Кол-во реплик можно менять в рантайм, а кол-во шардов нельзя. 45 -1 экземпляр шарда ElasticSearch соответствует 1 экземпляру индекса Apache Lucene. 46 -))) 47 -|(% style="width:364px" %)Индекса Apache Lucene|(% style="width:1158px" %)Содержит оригинальные документы и (Term dictionary maps). 48 -Term dictionary maps - содержит информацию о всех уникальных словах-терминах, номерах документов, в которых они расположены, а также кол-во повторений для каждого документа. 49 - 50 50 ---- 51 51 52 52 ==== Ссылки: ====
- XWiki.XWikiComments[1]
-
- Комментарий
-
... ... @@ -1,2 +1,7 @@ 1 -Solr is the popular, blazing-fast, open source enterprise search platform built on Apache Lucene 1 +Solr is the popular, blazing-fast, open source enterprise search platform built on [[Apache Lucene>>Разработка.JVM.Java.Библиотеки.Apache Lucene.WebHome]] 2 2 [[https:~~/~~/solr.apache.org/>>https://solr.apache.org/]] 3 + 4 +Open Source Search Server Sphinx 5 +[[https:~~/~~/github.com/sphinxsearch/sphinx>>https://github.com/sphinxsearch/sphinx]] 6 + 7 +
- XWiki.XWikiComments[2]
-
- Автор
-
... ... @@ -1,0 +1,1 @@ 1 +XWiki.cccc1808 - Комментарий
-
... ... @@ -1,0 +1,5 @@ 1 +Сценарий использования: 2 + 3 +Создание Индексов отвечающих за определенный промежуток времени. 4 +Через время N1 индексы выгружаются и хранятся по необходимости. 5 +Через время N2 индексы удаляются. - Дата
-
... ... @@ -1,0 +1,1 @@ 1 +2022-08-14 12:32:40.929