https://docs.mitigator.ru/v26.08/tags/graphite/ Hugo ru https://docs.mitigator.ru/v26.08/kb/cluster/ Mon, 01 Jan 0001 00:00:00 +0000 https://docs.mitigator.ru/v26.08/kb/cluster/ MITIGATOR может быть собран в кластер различных конфигураций, с разным набором подсистем и их взаимосвязей в зависимости от решаемой задачи и ограничений. В статье перечислены ключевые термины, описывающие кластеризацию MITIGATOR на различных уровнях. Уровни кластеризации В таблице представлен пример кластера из четырех экземпляров MITIGATOR, в котором на разных уровнях экземпляры выполняют разные роли. Под экземпляром понимается устройство, на котором развернута одна или несколько подсистем MITIGATOR. Обычно на экземпляре как минимум развернут Backend, но в некоторых случаях это могут быть другие подсистемы, например Collector или Graphite. https://docs.mitigator.ru/v26.08/integrate/prometheus/ Mon, 01 Jan 0001 00:00:00 +0000 https://docs.mitigator.ru/v26.08/integrate/prometheus/ Метрики в MITIGATOR хранятся в Graphite. Есть возможность экспортировать метрики в Prometheus через graphite_exporter. Для организации отправки необходимо развернуть и настроить graphite_exporter (основной файл конфигурации и файл конфигурации соответствия метрик), настроить отправку метрик на graphite_exporter. Краткая последовательность действий: Написание конфигурации соответствия метрик под конкретные нужды. Развертывание graphite_exporter с этой конфигурацией. Настройка отправки данных в системе MITIGATOR. Конфигурация соответствия метрик graphite_exporter Список метрик с кратким описанием доступен по ссылке. https://docs.mitigator.ru/v26.08/kb/graphite/grafana/ Mon, 01 Jan 0001 00:00:00 +0000 https://docs.mitigator.ru/v26.08/kb/graphite/grafana/ MITIGATOR в своей поставке включает Grafana, которую можно использовать для создания кастомизированных дашбордов. Обратитесь к документации Grafana, как именно это делать. Для получения доступа к веб-интерфейсу Grafana необходимо поднять сервис, который отключен по умолчанию. Временно это можно сделать следующей командой: docker-compose up -d --scale grafana=1 grafana Чтобы включить grafana на постоянной основе, необходимо в docker-compose.yml изменить scale с 0 на 1. services: ... grafana: ... scale: 1 ... После настройки необходимо поднять контейнер Grafana: https://docs.mitigator.ru/v26.08/kb/graphite/ Mon, 01 Jan 0001 00:00:00 +0000 https://docs.mitigator.ru/v26.08/kb/graphite/ В MITIGATOR для работы с графиками используются: ClickHouse, Graphite, Grafana, Carbon, CarbonAPI. Все перечисленное имеет возможности для более точной настройки в зависимости от требований. Статьи, описывающие различные аспекты настройки: Grafana Отдельный Graphite Конфигурация ClickHouse Внешняя Grafana Единый Graphite Время хранения метрик https://docs.mitigator.ru/v26.08/kb/graphite/grafbase/ Mon, 01 Jan 0001 00:00:00 +0000 https://docs.mitigator.ru/v26.08/kb/graphite/grafbase/ Перенос Graphite на отдельный сервер позволяет разделить нагрузку на два сервера. До переноса архива метрик, в интерфейсе MITIGATOR можно будет наблюдать только новые графики. Дальше по тексту Server1 – сервер с MITIGATOR, Server2 – сервер, на который выполняется перенос. Предполагается, что на Server2 уже установлен Docker и docker-compose и имеется способ доставки файловой базы с Server1 на Server2 (объем данных может составлять более 100 ГБ в зависимости от количества политик). https://docs.mitigator.ru/v26.08/kb/graphite/ext-grafana/ Mon, 01 Jan 0001 00:00:00 +0000 https://docs.mitigator.ru/v26.08/kb/graphite/ext-grafana/ Чтобы внешняя Grafana могла получать данные с Graphite, нужно пробросить порт 3080 из контейнера, для чего: Создать, либо дополнить docker-compose.override.yml следующим: services: gateway: ports: - "13080:3080" Перезапустить MITIGATOR: docker-compose down && docker-compose up -d В Web-интерфейсе Grafana добавить источник данных: Выбрать тип Graphite и указать внешний адрес: https://docs.mitigator.ru/v26.08/kb/graphite/onegraphite/ Mon, 01 Jan 0001 00:00:00 +0000 https://docs.mitigator.ru/v26.08/kb/graphite/onegraphite/ Использование единого Graphite для нескольких MITIGATOR позволяет снизить нагрузку на вычислительные ресурсы комплексов обработки трафика, упростить администрирование, настроить сложный мониторинг. Настройка Настройка сходна с переносом Graphite на отдельный сервер. Если имеется хост с настроенным Graphite, необходимо перейти к этапу настройки MITIGATOR для работы с внешним общим Graphite. Создайте директорию под сервисы: mkdir -p /opt/mitigator-graphite Скачайте docker-compose.yml: https://docs.mitigator.ru/v26.08/kb/graphite/retention/ Mon, 01 Jan 0001 00:00:00 +0000 https://docs.mitigator.ru/v26.08/kb/graphite/retention/ MITIGATOR хранит данные графиков в Graphite-ClickHouse. Свежие данные хранятся с меньшим разрежением, затем прореживаются: Срок Разрежение меньше суток 5 секунд от суток до недели 10 секунд от недели до месяца 1 минута от месяца до 145 дней 5 минут свыше 145 дней 10 минут Времена хранения не суммируются, то есть данные за последний день последней недели хранятся с разрежением 5 секунд, а следующие 6 дней (не 7) хранятся с разрежением 10 секунд. В отличие от стандартного хранилища Graphite, ClickHouse продолжает хранить метрики с самым высоким разрежением из заданных и за пределами настроенного срока (с настройками по умолчанию — после 145 дней).