Как: отслеживать EC2 с помощью Clojure и статистики сервера

Содержание этой статьи первоначально было написано Пауло Сузартом в его блоге .

вступление

Прежде чем идти дальше, обратите внимание на Parallel SSH и мониторинг системы в Clojure .

Сочетая мою потребность в мониторинге экземпляра EC2 под управлением nginx , bamboo и artifactory , с моим желанием кодировать в clojure, я решил использовать server-stats для базового мониторинга моего сервера через ssh.

EC2 поддерживает взаимодействия с использованием SSH без необходимости использования его файла .pem, если вы добавите в него свой открытый ключ. Посмотрите здесь, чтобы увидеть, как.

Это очень простые команды, и, конечно, вы должны использовать более серьезные команды для критически важных служб.

Конфигурационный файл server-stats на самом деле является файлом clojure с именем server-stats.cfg, в который вы помещаете некоторые определения для мониторинга. Сила серверной статистики заключается в том, что она работает с несколькими серверами. Но в этом случае у меня есть только один.

Конфиг файл

(import org.apache.commons.mail.SimpleEmail)


(defn send-mail [alert-msg server-name cmd-output]
    (doto (SimpleEmail.)
     ;; ... my email configs
      (.send)))

(add-alert-handler email [alert-msg server-name cmd-output]
  (send-mail alert-msg server-name cmd-output))

(set-ssh-username "ec2-user")

(add-server-group web-servers
  ["myserver.mydomain.com"])

(add-cmd disk
  {:doc "Get the disk usage using df"
   :cmd "df -h"
   :servers [web-servers]
   :alerts [{:column "Use%"
             :value-type percent
             :handlers [email]
             :msg "Disk space over 55% full"
             :trigger (> 55)}]})

(add-cmd is-nginx
  {:doc "Is nginx Running?"
   :servers [web-servers]
   :cmd "[[ -z `ps aux | grep nginx` ]] && echo 'false' || echo 'true'"
   :alerts [{:value-type bool
             :msg "Nginx is not running"
             :handlers [email]
             :trigger (= false)}]})

(add-cmd app-log
  {:doc "Get last 20 entries in todays app-servers log"
   :servers [web-servers]
   :cmd "tail -20 /home/ec2-user/artifactory-2.5.1.1/logs/access.log"})

(add-cmd http-errors
  {:doc "Show recent non-200s requests"
   :servers [web-servers]
   :cmd "tail -200 /var/log/nginx/error.log"})

(add-cmd is-artifactory
  {:doc "Is Artifactory Running?"
   :servers [web-servers]
   :cmd "[[ -z `ps aux | grep org.artifactory.standalone.main.Main` ]] && echo 'false' || echo 'true'"
   :alerts [{:value-type bool
             :msg "Artifactory is not running"
             :handlers [email]
             :trigger (= false)
             :mute-for 1860000}]})

(add-cmd is-bamboo
  {:doc "Is bamboo Running?"
   :servers [web-servers]
   :cmd "[[ -z `ps aux | grep com.attlassian.bamboo.server.Server` ]] && echo 'false' || echo 'true'"
   :alerts [{:value-type bool
             :msg "Bamboo is not running"
             :handlers [email]
             :trigger (= false)
             :mute-for 1860000}]})

Почти все команды были заимствованы из примера файла cfg. Небольшая, но важная деталь — ключ: отключение в оповещениях. Как видите, приведенная выше ссылка на статистику сервера указывает на мой ответвление.

Немой-за ключ добавляет возможность предотвратить любые запланированные команды SSH с короткими интервалами , чтобы затопить канал связи оповещения (электронная почта в этом CFG). Оповещения отправляются только по истечении времени отключения звука.

0 7 * * * SSH_AUTH_SOCK="$(find /tmp/keyring*/ -type s -user paulosuzart -group paulosuzart  -name 'ssh*' | head -n 1)" ~/workspace/p/Server-Stats/run.sh disk -log
*/10 * * * * SSH_AUTH_SOCK="$(find /tmp/keyring*/ -type s -user paulosuzart -group paulosuzart  -name 'ssh*' | head -n 1)" ~/workspace/p/Server-Stats/run.sh is-nginx -log
*/30 * * * * SSH_AUTH_SOCK="$(find /tmp/keyring*/ -type s -user paulosuzart -group paulosuzart  -name 'ssh*' | head -n 1)" ~/workspace/p/Server-Stats/run.sh is-artifactory -log
*/30 * * * * SSH_AUTH_SOCK="$(find /tmp/keyring*/ -type s -user paulosuzart -group paulosuzart  -name 'ssh*' | head -n 1)" ~/workspace/p/Server-Stats/run.sh is-bamboo -log

#!/bin/bash
# Wraps the start of server-stats. If -log is passed, will save
# the resulting execution to log/cmd
# [email protected]

# java -jar should run from inside the server-stats dir
cd ~/workspace/p/Server-Stats

if [ -z $1 ]; then
  echo "usage: run cmd [-log]"
  exit 2
fi

COMM="java -jar server-stats-0.1-standalone.jar -a $1"
if [[ ! -z $2 && "-log"=$2 ]]; then
  echo "logging to log/$1.out"
  $COMM=$COMM:" > log/$1.out"
fi

echo $COMM
$COMM