Предисловие

Я давно не обновлял свою статью, поэтому хотел бы извиниться перед нашими читателями! Недавно я нашел новую работу и почти весь испытательный срок перед новой работой провел на работе. Кроме того, в этот период я ​​также изучал некоторые проекты с открытым исходным кодом. Чтобы начать, я потратил время на заполнение анкеты. много подводных камней, так что паблик аккаунт Вопрос обновления статьи откладывался снова и снова и затягивался больше чем на месяц. Такое ощущение, что время летит и его нельзя терять! Теперь вводим текст.

ElasticSearch (сокращенно ES) — это поисковая система, поддерживающая огромное количество поисковых систем.,Когда распределенной системе необходимо поддерживать массовый поиск по запросу «Служить», она отдает приоритет ES. Поэтому освоение ЭС-технологий также является обязательным курсом для поступления на крупный завод и получения высокой зарплаты.,Автор стремится к углубленному освоению технологии ES.,С одной стороны, я надеюсь, что смогу попасть на большую фабрику и закрепиться, если у меня будет такая возможность. Сделать шаг назад, даже если ты не можешь попасть на большой завод,Вам также необходимо уметь создавать продукты, которые могут сделать программисты крупных производителей.,К тому времени, даже если у вас есть веб-сайт с десятками тысяч ежедневных пользователей илиAppВы также можете иметь хороший доход。

Причина, по которой я выбрал версию ES 7.12, заключается в том, что эта версия ES является относительно новой и стабильной версией.,связанный сKibanaИнтерфейс версии также был значительно обновлен.,Поэтому я решил установить эту версию ES. Автор также ранее устанавливал отдельные ЕССлужить под системы Linux и Windows.,Но мне показалось, что его установка и настройка очень затруднительны.,Также легко сообщить о различных ошибках при установке. Позже я увидел, что многие эксперты рекомендовали использовать Docker для беспроблемной установки.,Также легко обслуживать,Так автор еще и в своем облаке попробовал использовать Служитьиспользуется вDockerУстановитьESиKibanaи Сегментация китайских словустройство,Теперь мы официально приступаем к этапам установки.,В этой статье предполагается, что читатели уже установили Docker Служить на свои облачные серверы.,и пройтиосуществлятьsystemctl start docker.service Команда запускает службу Docker.

1. Создайте сеть

Поскольку нам также необходимо развернуть контейнер Kibana, нам необходимо соединить контейнеры es и Kibana. Здесь мы сначала создаем сеть.

Используйте FinalShell для входа в свой собственный клиент облачного сервера Linux (Alibaba Cloud или Tencent Cloud).

docker network create es-net

2. Загрузите изображение

осуществлять cd /usr/localВойдите в облако Служитьустройствоиз /usr/localОглавлениеосуществлятьтянутьESиKibanaУстановить包изdockerЗаказ

docker pull elasticsearch:7.12.1
docker pull kibana:7.12.1

Это изображение elasticsearch очень большое, около 1G.

3. Запустите контейнер

осуществлятьследующееdockerЗаказбегатьESСлужить：

docker run -d \
  --name es \
    -e "ES_JAVA_OPTS=-Xms512m -Xmx512m" \
    -e "discovery.type=single-node" \
    -v es-data:/usr/local/elasticsearch7.12.1/data \
    -v es-plugins:/usr/local/elasticsearch7.12.1/plugins \
    -v es-logs:/usr/local/elasticsearch7.12.1/logs \
    --privileged \
    --network es-net \
    -p 9200:9200 \
    -p 9300:9300 \
elasticsearch:7.12.1

Объяснение команды:

• -e "cluster.name=es-docker-cluster"：Установить имя кластера
• -e "http.host=0.0.0.0"：Адрес прослушивания,Доступен из внешней сети
• -e "ES_JAVA_OPTS=-Xms512m -Xmx512m"：Выделить объем памяти
• -e "discovery.type=single-node"：Режим одного узла
• -v es-data:/usr/local/elasticsearch7.12.1/data：Подключить логический том,Привязать каталог данных es
• -v es-logs:/usr/local/elasticsearch7.12.1/logs：Подключить логический том,Привязать каталог журналов
• -v es-plugins:/usr/local/elasticsearch7.12.1/plugins：Подключить логический том,Привязать каталог плагина
• --privileged：Предоставить доступ к логическому тому
• --network es-net : Присоединитесь к сети под названием es-net.
• -p 9200:9200：Конфигурация сопоставления портов

Откройте брандмауэр порта 9200.

осуществлятьследующее Заказ Откройте брандмауэр порта 9200.

# Откройте порт 9200 для HTTP-связи.
firewall-cmd --zone=public --add-port=9200/tcp --permanent
# Открыть порт 9300 для связи между ES-кластерами.
firewall-cmd --zone=public --add-port=9300/tcp --permanent
# Перезагрузите брандмауэр, чтобы открытые порты вступили в силу немедленно.
firewall-cmd --reload
# Посмотреть список открытых общедоступных портов
firewall-cmd --zone=public --list-ports

Вам также необходимо войти в облако Служитьустройство Консоль проходит【Служитьустройство Подробности】-> Нажмите [Добавить правило] в меню [Брандмауэр] и добавьте порты 9200 и 9300 соответственно во всплывающем диалоговом окне, как показано ниже:

Сюда же автор добавил правила порта 5601 Кибаны

Проверьте результаты установки

Просмотрустройствоадрес Введите в столбецURL：http://<твое облако Служитьустройство Публичная сетьIPадрес>:9200/

Возврат следующих результатов указывает на то, что Docker успешно установил и запустил службу ElasticSearch.

{
  "name" : "1193428353da",
  "cluster_name" : "docker-cluster",
  "cluster_uuid" : "9iSQFg-BT5KLZlLnZhvSeQ",
  "version" : {
    "number" : "7.12.1",
    "build_flavor" : "default",
    "build_type" : "docker",
    "build_hash" : "3186837139b9c6b6d23c3200870651f10d3343b7",
    "build_date" : "2021-04-20T20:56:39.040728659Z",
    "build_snapshot" : false,
    "lucene_version" : "8.8.0",
    "minimum_wire_compatibility_version" : "6.8.0",
    "minimum_index_compatibility_version" : "6.0.0-beta1"
  },
  "tagline" : "You Know, for Search"
}

Видно, что движок Lucene, соответствующий версии 7.12, достиг версии 8.8.0. Видно, что обновление ES также происходит очень быстро. Последний ES достиг версии 8 или выше.

4. Развертывание Кибаны

Kibana сделать операциюESИнтерфейс визуализации данных,использоватьKibana Очень удобно управлять ES.

В каталоге /usr/local изучите следующую команду docker.

docker run -d \ 
--name kibana \ 
-e ELASTICSEARCH_HOSTS=http://es:9200 \ 
--network=es-net \ 
-p 5601:5601  \ 
kibana:7.12.1

• --network es-net : Присоединитесь к сети под названием es-net., в той же сети, что и elasticsearch
• -e ELASTICSEARCH_HOSTS=http://es:9200"：настраиватьelasticsearchизадрес,Потому что Kibana уже находится в той же сети, что и elasticsearch.,Таким образом, доступ к elasticsearch можно получить напрямую, используя имя контейнера.
• -p 5601:5601：Конфигурация сопоставления портов

Запуск Kibana обычно происходит медленно, и вам нужно немного подождать. Вы можете передать команду:

docker logs -f kibana

Вы также можете просмотреть поустройстводоступ：http://<твое облако Служитьустройство Публичная сетьIPадрес>:5601/app/home#/

В правом верхнем углу главного интерфейса Kibana есть кнопка управления DevTools. Нажмите эту кнопку, чтобы войти в интерфейс разработки, как показано ниже:

Введите следующую команду в поле ввода консоли слева, а затем нажмите кнопку треугольника изучить в правом верхнем углу, чтобы запросить просмотр результатов запроса в правом интерфейсе.

GET _search
{
  "query": {
    "match_all": {
      
    }
  }
}

В этом интерфейсе вы можете написать DSL для работы с эластичным поиском, и он имеет функцию автоматического завершения для операторов DSL. Судя по результатам запроса, ES при создании автоматически создал множество коллекций документов, например: .kibana-event-log-7.12.1-000001 и .kibana_7.12.1_001 и т. д.

5 Установите сегментатор слов IK

Залезть внутрь контейнера

docker exec -it es bash

Введите каталог bin

cd /usr/share/elasticsearch/bin

Загрузите и установите онлайн

./elasticsearch-plugin  install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.12.1/elasticsearch-analysis-ik-7.12.1.zip

покидать

exit

Перезапустить контейнер

docker restart es

Токенизатор K имеет два режима:

• ik_smart: наименьшая сегментация
• ik_max_word: тончайшая сегментация

Введите следующий запрос на сегментацию китайского слова в поле ввода консоли слева:

GET _analyze
{
  "analyzer": "ik_smart",
  "text": «Сборник статей, опубликованных молодым программистом Афу в 2023 году»
}

Затем нажмите кнопку запроса на изучение справа, вы увидите, что окно результатов справа возвращает следующие результаты.

{
  "tokens" : [
    {
      "token" : «программист»,
      "start_offset" : 0,
      "end_offset" : 3,
      "type" : "CN_WORD",
      "position" : 0
    },
    {
      "token" : "молодость",
      "start_offset" : 3,
      "end_offset" : 5,
      "type" : "CN_WORD",
      "position" : 1
    },
    {
      "token" : «Афу»,
      "start_offset" : 5,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 2
    },
    {
      "token" : «2023»,
      "start_offset" : 7,
      "end_offset" : 12,
      "type" : "TYPE_CQUAN",
      "position" : 3
    },
    {
      "token" : "публиковать",
      "start_offset" : 12,
      "end_offset" : 14,
      "type" : "CN_WORD",
      "position" : 4
    },
    {
      "token" : "из",
      "start_offset" : 14,
      "end_offset" : 15,
      "type" : "CN_CHAR",
      "position" : 5
    },
    {
      "token" : "статья",
      "start_offset" : 15,
      "end_offset" : 17,
      "type" : "CN_WORD",
      "position" : 6
    },
    {
      "token" : "собирать",
      "start_offset" : 17,
      "end_offset" : 19,
      "type" : "CN_WORD",
      "position" : 7
    }
  ]
}

Вы можете видеть, что китайское предложение «Сборник статей, опубликованных молодым программистом Афу в 2023 году» было разделено на 7 объектов-токенов с помощью сегментатора китайских слов типа ik_smart. Каждый объект-токен содержит токен, start_offset (начальное смещение), end_offset (их 5). поля, включая конечное смещение), тип (type) и положение (position).

Заключение

В этой статье подробно показано использование докер-контейнеров для установки версии 7.12 ES, Kibana и китайского сегментатора слов, что закладывает основу для нашего углубленного изучения базы данных распределенной поисковой системы ES. Позже автор напишет несколько статей. Углубленное изучение технологии ES на основе опыта проекта. Статья, так что следите за обновлениями!