Prometheus + Nginx
Prometheus – это бесплатное программное приложение, используемое для мониторинга событий и оповещения. Он записывает метрики в реальном времени в базу данных временных рядов, построенную с использованием модели HTTP-запроса, с гибкими запросами и оповещениями в режиме реального времени.
Установка Prometheus
Добавляем системного пользователя prometheus
$ sudo useradd -M -s /bin/false prometheus
Создаем необходимые каталоги для prometheus
$ sudo mkdir /etc/prometheus /var/lib/prometheus
$ sudo chown prometheus /var/lib/prometheus/
Скачиваем последнюю версию prometheus в каталог /tmp
$ wget https://github.com/prometheus/prometheus/releases/download/v2.19.3/prometheus-2.19.3.linux-amd64.tar.gz -P /tmp
$ cd /tmp
Распаковываем
Selectel — ведущий провайдер облачной инфраструктуры и услуг дата-центров
Компания занимает лидирующие позиции на рынке на рынке выделенных серверов и приватных облаков, и входит в топ-3 крупнейших операторов дата-центров в России.
$ sudo dnf install tar
$ tar xvzf prometheus-2.19.3.linux-amd64.tar.gz
Устанавливаем prometheus
$ cd prometheus-2.19.3.linux-amd64
$ sudo cp prometheus /usr/local/bin
$ sudo cp promtool /usr/local/bin
$ sudo cp prometheus.yml /etc/prometheus/
Правим конфигурационный файл prometheus
$ sudo nano /etc/prometheus/prometheus.yml
# my global config
global:
scrape_interval: 15s
evaluation_interval: 15s
# Alertmanager configuration
alerting:
alertmanagers:
- static_configs:
- targets:
# - alertmanager:9093
# Load rules once and periodically evaluate them according to the global 'evalu$
rule_files:
# - "first_rules.yml"
# - "second_rules.yml"
# В дальнейшем будем пользоваться схемой: новое правило - новый файл
# rule_files:
# - /etc/prometheus/rules.d/*.rules.yml
scrape_configs:
- job_name: 'prometheus'
static_configs:
- targets: ['localhost:9090']
# В дальнейшем добавим авторизацию в node_exporter
- job_name: 'node'
# basic_auth:
# username: prometheus
# password: password
static_configs:
- targets: ['localhost:9100']
Открываем порт 19090. Мы используем не стандартный порт Prometheus, ч то бы в дальнейшем через NGINX добавить Basic auth
$ sudo firewall-cmd --add-port=19090/tcp --permanent
$ sudo firewall-cmd --reload
Создаем System Unit
$ sudo nano /etc/systemd/system/prometheus.service
[Unit]
Description=Prometheus Time Series Collection and Processing Server
Wants=network-online.target
After=network-online.target
[Service]
User=prometheus
Group=prometheus
Type=simple
ExecStart=/usr/local/bin/prometheus \
--config.file /etc/prometheus/prometheus.yml \
--storage.tsdb.path /var/lib/prometheus/ \
--web.console.templates=/etc/prometheus/consoles \
--web.console.libraries=/etc/prometheus/console_libraries \
--web.external-url http://localhost:19090 \
--web.route-prefix=/
[Install]
WantedBy=multi-user.target
Добавляем сервис а автозагрузку и запускаем его
$ sudo systemctl daemon-reload
$ sudo systemctl enable --now prometheus
Установка NGINX и настройка Reverse proxy
Устанавливаем утилиту dnf-utils
$ sudo dnf -y install dnf-utils
Добавляем репозиторий NGINX
$ sudo nano /etc/yum.repos.d/nginx.repo
[nginx-stable]
name=nginx stable repo
baseurl=http://nginx.org/packages/centos/$releasever/$basearch/
gpgcheck=1
enabled=1
gpgkey=https://nginx.org/keys/nginx_signing.key
module_hotfixes=true
[nginx-mainline]
name=nginx mainline repo
baseurl=http://nginx.org/packages/mainline/centos/$releasever/$basearch/
gpgcheck=1
enabled=0
gpgkey=https://nginx.org/keys/nginx_signing.key
module_hotfixes=true
По умолчанию будет использоваться стабильная версия. Если нужна основная версия(mainline), переключаемся
$ sudo dnf config-manager --set-enabled nginx-mainline
Устанавливаем NGINX
$ sudo dnf -y install nginx
Отключаем дефолтный конфиг
$ cd /etc/nginx/conf.d/
$ sudo mv default.conf default.conf.disable
Создаем конфиг prometheus.conf
server {
listen 19090;
listen [::]:19090;
server_name _;
location /
{
proxy_set_header Accept-Encoding "";
proxy_pass http://localhost:9090/;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
auth_basic "Prometheus";
auth_basic_user_file "/etc/nginx/prometheus.htpasswd";
}
}
Устанавливаем утилиту httpd-tools
$ sudo dnf -y install httpd-tools
Генерируем пароль
$ sudo htpasswd -c /etc/nginx/prometheus.htpasswd mypomethuser
New password: password
Re-type new password: password
Adding password for user mypomethuser
Настройка SELinux
Настраиваем SELinux
$ cd /tmp
$ sudo grep nginx /var/log/audit/audit.log | grep denied | audit2allow -m nginxlocalconf > nginxlocalconf.te
$ sudo grep nginx /var/log/audit/audit.log | grep denied | audit2allow -M nginxlocalconf
******************** IMPORTANT ***********************
To make this policy package active, execute:
semodule -i nginxlocalconf.pp
$ sudo semodule -i nginxlocalconf.pp
Добавляем сервис Nginx в автозагрузку, запускаем его, смотрим статус
$ sudo systemctl enable --now nginx
$ sudo systemctl status nginx
Готово, prometheus с авторизацией доступен по адресу http://%your_ip%:19090