Подробное объяснение шаблона индекса ES
Подробное объяснение шаблона индекса ES

1. Шаблон индекса

Шаблоны индексов — это способ сообщить Elasticsearch, как настроить индекс при его создании.

  • Использование

Вы можете настроить шаблон перед созданием индекса, чтобы при создании индекса (вручную или путем индексирования документа) настройки шаблона использовались в качестве основы для создания индекса.

Тип шаблона

Существует два типа шаблонов: шаблоны индексов и шаблоны компонентов.

  1. Шаблоны компонентов — это многоразовые строительные блоки.,для отображения конфигурации,Настройки и псевдонимы не применяются непосредственно к группе.
  2. Шаблоны индексов могут содержать шаблоны компонентов.,Вы также можете указать настройки напрямую,Сопоставления и псевдонимы.

Приоритет в шаблонах индексов

  1. Составные шаблоны имеют приоритет над старыми шаблонами. Если ни один составной шаблон не соответствует данному индексу,тогда старый шаблон все еще может соответствовать и применяться.
  2. Если индекс создается с явными настройками и этот индекс также соответствует шаблону индекса, настройки в запросе на создание индекса будут иметь приоритет над настройками, указанными в шаблоне индекса и шаблонах его компонентов.
  3. Если новый поток данных или индекс соответствует нескольким шаблонам индексов,Затем используйте шаблон индекса с наивысшим приоритетом.

Встроенный шаблон индекса

Elasticsearchиметь Встроенный шаблон индекса,Каждый шаблон индекса имеет приоритет 100.,Применяется к следующим шаблонам индексов:

  1. logs-*-*
  2. metrics-*-*
  3. synthetics-*-*

Поэтому, когда дело доходит до встроенных шаблонов индексов, избегайте конфликтов режимов индексирования. Больше можно найти здесь

Случай

  • Сначала создайте два шаблона компонентов индекса:
Язык кода:javascript
копировать
PUT _component_template/component_template1
{
  "template": {
    "mappings": {
      "properties": {
        "@timestamp": {
          "type": "date"
        }
      }
    }
  }
}

PUT _component_template/runtime_component_template
{
  "template": {
    "mappings": {
      "runtime": { 
        "day_of_week": {
          "type": "keyword",
          "script": {
            "source": "emit(doc['@timestamp'].value.dayOfWeekEnum.getDisplayName(TextStyle.FULL, Locale.ROOT))"
          }
        }
      }
    }
  }
}

Результаты выполнения следующие

  • Создайте шаблон, используя шаблоны компонентов
Язык кода:javascript
копировать
PUT _index_template/template_1
{
  "index_patterns": ["bar*"],
  "template": {
    "settings": {
      "number_of_shards": 1
    },
    "mappings": {
      "_source": {
        "enabled": true
      },
      "properties": {
        "host_name": {
          "type": "keyword"
        },
        "created_at": {
          "type": "date",
          "format": "EEE MMM dd HH:mm:ss Z yyyy"
        }
      }
    },
    "aliases": {
      "mydata": { }
    }
  },
  "priority": 500,
  "composed_of": ["component_template1", "runtime_component_template"], 
  "version": 3,
  "_meta": {
    "description": "my custom"
  }
}

Результаты выполнения следующие

  • Создать матчbar*изиндексbar-test
Язык кода:javascript
копировать
PUT /bar-test

Затем получите отображение

Язык кода:javascript
копировать
GET /bar-test/_mapping

Результаты выполнения следующие

2. Моделирование многокомпонентных шаблонов

Поскольку шаблон может состоять не только из нескольких шаблонов компонентов, но и из самого шаблона индекса, какова будет окончательная настройка индекса? Разработчики ElasticSearch учли это и предоставили API для моделирования конфигурации объединенного шаблона.

Имитация результата индекса

Например, в шаблоне template_1 выше нам не нужно создавать индекс для bar* (здесь моделируется bar-pdai-test), но мы также можем смоделировать и рассчитать конфигурацию индекса:

Язык кода:javascript
копировать
POST /_index_template/_simulate_index/bar-pdai-test

Результаты выполнения следующие

Имитация результатов шаблона компонента

Конечно, поскольку шаблон template_1 состоит из двух шаблонов компонентов, мы также можем смоделировать конфигурацию индекса после объединения template_1:

Язык кода:javascript
копировать
POST /_index_template/_simulate/template_1

Результаты выполнения следующие:

Язык кода:javascript
копировать
{
  "template" : {
    "settings" : {
      "index" : {
        "number_of_shards" : "1"
      }
    },
    "mappings" : {
      "runtime" : {
        "day_of_week" : {
          "type" : "keyword",
          "script" : {
            "source" : "emit(doc['@timestamp'].value.dayOfWeekEnum.getDisplayName(TextStyle.FULL, Locale.ROOT))",
            "lang" : "painless"
          }
        }
      },
      "properties" : {
        "@timestamp" : {
          "type" : "date"
        },
        "created_at" : {
          "type" : "date",
          "format" : "EEE MMM dd HH:mm:ss Z yyyy"
        },
        "host_name" : {
          "type" : "keyword"
        }
      }
    },
    "aliases" : {
      "mydata" : { }
    }
  },
  "overlapping" : [ ]
}

Имитировать результат объединения шаблона компонента и собственного шаблона

  • Создайте два новых шаблона
Язык кода:javascript
копировать
PUT /_component_template/ct1
{
  "template": {
    "settings": {
      "index.number_of_shards": 2
    }
  }
}

PUT /_component_template/ct2
{
  "template": {
    "settings": {
      "index.number_of_replicas": 0
    },
    "mappings": {
      "properties": {
        "@timestamp": {
          "type": "date"
        }
      }
    }
  }
}

Имитировать добавление конфигурации собственного шаблона на основе двух шаблонов компонентов.

Язык кода:javascript
копировать
POST /_index_template/_simulate
{
  "index_patterns": ["my*"],
  "template": {
    "settings" : {
        "index.number_of_shards" : 3
    }
  },
  "composed_of": ["ct1", "ct2"]
}

Результат выполнения следующий

Язык кода:javascript
копировать
{
  "template" : {
    "settings" : {
      "index" : {
        "number_of_shards" : "3",
        "number_of_replicas" : "0"
      }
    },
    "mappings" : {
      "properties" : {
        "@timestamp" : {
          "type" : "date"
        }
      }
    },
    "aliases" : { }
  },
  "overlapping" : [ ]
}
boy illustration
Углубленный анализ переполнения памяти CUDA: OutOfMemoryError: CUDA не хватает памяти. Попыталась выделить 3,21 Ги Б (GPU 0; всего 8,00 Ги Б).
boy illustration
[Решено] ошибка установки conda. Среда решения: не удалось выполнить первоначальное зависание. Повторная попытка с помощью файла (графическое руководство).
boy illustration
Прочитайте нейросетевую модель Трансформера в одной статье
boy illustration
.ART Теплые зимние предложения уже открыты
boy illustration
Сравнительная таблица описания кодов ошибок Amap
boy illustration
Уведомление о последних правилах Points Mall в декабре 2022 года.
boy illustration
Даже новички могут быстро приступить к работе с легким сервером приложений.
boy illustration
Взгляд на RSAC 2024|Защита конфиденциальности в эпоху больших моделей
boy illustration
Вы используете ИИ каждый день и до сих пор не знаете, как ИИ дает обратную связь? Одна статья для понимания реализации в коде Python общих функций потерь генеративных моделей + анализ принципов расчета.
boy illustration
Используйте (внутренний) почтовый ящик для образовательных учреждений, чтобы использовать Microsoft Family Bucket (1T дискового пространства на одном диске и версию Office 365 для образовательных учреждений)
boy illustration
Руководство по началу работы с оперативным проектом (7) Практическое сочетание оперативного письма — оперативного письма на основе интеллектуальной системы вопросов и ответов службы поддержки клиентов
boy illustration
[docker] Версия сервера «Чтение 3» — создайте свою собственную программу чтения веб-текста
boy illustration
Обзор Cloud-init и этапы создания в рамках PVE
boy illustration
Корпоративные пользователи используют пакет регистрационных ресурсов для регистрации ICP для веб-сайта и активации оплаты WeChat H5 (с кодом платежного узла версии API V3)
boy illustration
Подробное объяснение таких показателей производительности с высоким уровнем параллелизма, как QPS, TPS, RT и пропускная способность.
boy illustration
Удачи в конкурсе Python Essay Challenge, станьте первым, кто испытает новую функцию сообщества [Запускать блоки кода онлайн] и выиграйте множество изысканных подарков!
boy illustration
[Техническая посадка травы] Кровавая рвота и отделка позволяют вам необычным образом ощипывать гусиные перья! Не распространяйте информацию! ! !
boy illustration
[Официальное ограниченное по времени мероприятие] Сейчас ноябрь, напишите и получите приз
boy illustration
Прочтите это в одной статье: Учебник для няни по созданию сервера Huanshou Parlu на базе CVM-сервера.
boy illustration
Cloud Native | Что такое CRD (настраиваемые определения ресурсов) в K8s?
boy illustration
Как использовать Cloudflare CDN для настройки узла (CF самостоятельно выбирает IP) Гонконг, Китай/Азия узел/сводка и рекомендации внутреннего высокоскоростного IP-сегмента
boy illustration
Дополнительные правила вознаграждения амбассадоров акции в марте 2023 г.
boy illustration
Можно ли открыть частный сервер Phantom Beast Palu одним щелчком мыши? Супер простой урок для начинающих! (Прилагается метод обновления сервера)
boy illustration
[Играйте с Phantom Beast Palu] Обновите игровой сервер Phantom Beast Pallu одним щелчком мыши
boy illustration
Maotouhu делится: последний доступный внутри страны адрес склада исходного образа Docker 2024 года (обновлено 1 декабря)
boy illustration
Кодирование Base64 в MultipartFile
boy illustration
5 точек расширения SpringBoot, супер практично!
boy illustration
Глубокое понимание сопоставления индексов Elasticsearch.
boy illustration
15 рекомендуемых платформ разработки с нулевым кодом корпоративного уровня. Всегда найдется та, которая вам понравится.
boy illustration
Аннотация EasyExcel позволяет экспортировать с сохранением двух десятичных знаков.