Docker + Solr How-to: Мониторинг официального изображения Solr Docker

Быстро растущее число организаций используют Solr и Docker в производстве, и они, вероятно, рады новому официальному имиджу. Излишне говорить, что мониторинг Solr необходим в производстве. Docker подрывает во многих отношениях, и есть много вещей, которые немного отличаются и заслуживают упоминания. Они включают:

1. Изменено развертывание Solr и его инструментов мониторинга с использованием Dockerfile, Docker Compose или различных инструментов Orchestration.
2. Существует новый уровень для мониторинга: Метрики и события контейнеров, см. Мониторинг событий и метрик Docker и SPM для Docker.
3. Ведение журнала изменилось: контейнеры регистрируются в консоли, и журналы необходимо извлекать из Docker-Daemon, а не получать их из файла журнала Solr. Проверьте наш пост на тему: Инновационный Docker Log Management
4. Официальные изображения могут не предоставлять параметры для мониторинга (например, JMX). Однако официальный образ для Solr предоставляет возможность передавать параметры в среду выполнения Java. Мы будем использовать эту опцию для мониторинга Solr в этом посте.

Далее я собираюсь продемонстрировать настройку узла Solr с SPM. Окончательная установка обеспечит полный мониторинг и регистрацию пакета Solr & Docker :

• Подробные метрики приложений для Solr, развернутые в Docker
• Подробные метрики контейнера и события Docker
• Централизованные журналы для всех контейнеров по SPM для Docker

Давайте сначала определимся с одним из следующих вариантов мониторинга Solr в Docker:

1. Создайте свой собственный контейнер Solr с набором инструментов для мониторинга и оповещения с открытым исходным кодом. Я не буду вдаваться в подробности об этой опции сегодня, потому что работа с набором инструментов DevOps с открытым исходным кодом и неофициальным изображением Solr не звучит чисто; Кроме того, мы можем сделать лучше.
2. Используйте автономный агент мониторинга, который запрашивает метрики из контейнера Solr. Это требует настройки сетевых конфигураций JMX и Docker для монитора и Solr. Метрики, собираемые удаленными агентами, ограничены, и в контексте Docker запуск процесса внешнего мониторинга плюс процессы Solr потребляют больше ресурсов. И следующий вариант…
3. Внедрить агент мониторинга процесса SPM в Solr. Этот параметр имеет минимальное использование ресурсов и поддерживает расширенные функции мониторинга, такие как отслеживание транзакций и AppMap .

В этом сообщении мы рассмотрим вариант № 3, так как он дает лучшее представление о Solr. Sematext предоставляет клиент SPM (включая агент мониторинга и отправителя метрик), предварительно установленный в образе Docker. Мы называем этот клиент dM Dockerized SPM «Образ / контейнер клиента SPM» в следующих инструкциях. Основной трюк здесь — это смонтировать том из клиентского контейнера SPM в контейнеры Solr, чтобы загрузить библиотеку мониторинга, которая является частью клиентского контейнера SPM.

Давайте посмотрим на желаемую настройку и как туда добраться:

Мы будем использовать последнюю версию Docker-Compose (> v1.5), потому что тогда мы можем использовать подстановку переменных среды в Docker-Compose .

1) Сконфигурировать и запустить контейнер SPM-Client

Маркер SPM является уникальным идентификатором для отслеживаемых приложений. Если вы не создали приложение SPM для Solr, сначала создайте его здесь . Должно занять около 37 секунд.

# Set the SPM Token as Environment Variable
export SPM_TOKEN=4feb144c-4da8-4081-83b5-b0b8e06e743a
# Set the JVM Name, which appears in SPM JVM Metrics Report
# In addition we will use it as Hostname for the Solr container
export JVM_NAME=SOLR1

spm-client-solr:
 image: sematext/spm-client
 container_name: spm-client-solr
 hostname: spm-client-solr
 environment:
 - SPM_CONFIG=${SPM_TOKEN} solr javaagent ${JVM_NAME}

SOLR1:
 image: solr
 hostname: solr1
 ports:
 - "8983:8983"
 volumes_from:
 - spm-client-solr
 environment:
 - SOLR_OPTS=-Dcom.sun.management.jmxremote -javaagent:/opt/spm/spm-monitor/lib/spm-monitor-solr.jar=${SPM_TOKEN}::${JVM_NAME}
 command: bin/solr -f

    docker-compose up -d

docker run -d -name spm-agent -e SPM_TOKEN=SPM_DOCKER_APP_TOKEN -e LOGSENE_TOKEN=LOGSENE_APP_TOKEN