Управление мониторинговыми панелями
Содержание
Обзор функцииОсновные возможностиПреимуществаСценарии использованияПредварительные требованияВзаимосвязь между панелями мониторинга и компонентами мониторингаУправление панелями мониторингаСоздание панели мониторингаИмпорт панелиДобавление переменныхДобавление панелейДобавление группПереключение панелейДругие операцииУправление панелямиОписание панелейОписание параметров панелиОбщие параметрыСпециальные параметры для панелейСоздание панелей мониторинга через CLIОбщие функции и переменныеОбщие функцииОбщие переменныеПример использования переменной 1Пример использования переменной 2Примечания при использовании встроенных метрикОбзор функции
Платформа предоставляет мощный функционал управления панелями мониторинга, предназначенный для замены традиционных инструментов Grafana, предлагая пользователям более комплексный и гибкий опыт мониторинга. Эта функция агрегирует различные данные мониторинга внутри платформы, представляя единый мониторинговый обзор, что значительно повышает эффективность вашей настройки.
Основные возможности
- Поддержка настройки пользовательских панелей мониторинга как для бизнес-обзоров, так и для обзоров платформы.
- Возможность просмотра публично расшаренных панелей, настроенных в обзорах платформы, из бизнес-обзоров с изоляцией данных по namespace, к которому принадлежит бизнес.
- Поддержка управления панелями внутри панели мониторинга: добавление, удаление, изменение панелей, масштабирование панелей и перемещение панелей с помощью drag-and-drop.
- Возможность установки пользовательских переменных внутри панели для фильтрации данных запросов.
- Поддержка настройки групп внутри панели для управления панелями. Группы могут отображаться повторно на основе пользовательских переменных.
- Поддерживаемые типы панелей: trend, step line chart, bar chart, horizontal bar chart, bar gauge chart, gauge chart, table, stat chart, XY chart, pie chart, text.
- Функция импорта панелей Grafana одним кликом.
Преимущества
- Поддержка пользовательских сценариев мониторинга без ограничений предопределёнными шаблонами, что позволяет достичь по-настоящему персонализированного мониторинга.
- Богатый набор вариантов визуализации, включая линейные графики, столбчатые диаграммы, круговые диаграммы, а также гибкие варианты компоновки и стилизации.
- Полная интеграция с ролевыми правами платформы, позволяющая бизнес-обзорам определять собственные панели мониторинга при обеспечении изоляции данных.
- Глубокая интеграция с различными функциями контейнерной платформы, обеспечивающая мгновенный доступ к данным мониторинга контейнеров, сетей, хранилищ и т.д., предоставляя пользователям всестороннее наблюдение за производительностью и диагностику неисправностей.
- Полная совместимость с JSON панелей Grafana, что облегчает миграцию из Grafana для дальнейшего использования.
Сценарии использования
- Управление IT-операциями: В составе команды IT-операций вы можете использовать панели мониторинга для унифицированного отображения и управления различными метриками производительности контейнерной платформы, такими как CPU, память, сетевой трафик и др. Настраивая отчёты мониторинга и правила оповещений, вы сможете своевременно обнаруживать и локализовать системные проблемы, повышая эффективность эксплуатации.
- Анализ производительности приложений: Для разработчиков и тестировщиков приложений панели мониторинга предлагают разнообразные варианты визуализации для наглядного отображения состояния работы приложений и потребления ресурсов. Вы можете создавать специализированные мониторинговые обзоры, адаптированные под разные сценарии приложений, для глубокого анализа узких мест производительности и предоставления основы для оптимизации.
- Мультикластерное управление: Для пользователей, управляющих несколькими контейнерными кластерами, панели мониторинга могут агрегировать данные мониторинга из разных кластеров, позволяя в одном обзоре получить представление об общем состоянии системы.
- Диагностика неисправностей: При возникновении системных проблем панели мониторинга предоставляют комплексные данные о производительности и аналитические инструменты для быстрой локализации причины. Вы можете оперативно просматривать колебания соответствующих метрик мониторинга на основе информации об оповещениях для углублённого анализа неисправностей.
Предварительные требования
В настоящее время панели мониторинга поддерживают только просмотр данных мониторинга, собранных компонентами мониторинга, установленными в платформе. Поэтому перед настройкой панели мониторинга необходимо подготовить следующее:
- Убедитесь, что в кластере, для которого вы хотите настроить панель мониторинга, установлены компоненты мониторинга, а именно плагин ACP Monitor с Prometheus или ACP Monitor с VictoriaMetrics.
- Убедитесь, что данные, которые вы хотите отображать на панели, были собраны компонентами мониторинга.
Взаимосвязь между панелями мониторинга и компонентами мониторинга
- Ресурсы панелей мониторинга хранятся в Kubernetes-кластере. Вы можете переключать обзоры между разными кластерами с помощью вкладки Cluster в верхней части.
- Панели мониторинга зависят от компонентов мониторинга в кластере для запроса источников данных. Поэтому перед использованием панелей мониторинга убедитесь, что в текущем кластере успешно установлены компоненты мониторинга и они работают нормально.
- По умолчанию панель мониторинга будет запрашивать данные мониторинга из соответствующего кластера. Если в кластере установлен плагин VictoriaMetrics в режиме proxy, мы автоматически будем запрашивать кластер хранения для получения соответствующих данных без необходимости специальной настройки.
Управление панелями мониторинга
Панель мониторинга — это коллекция из одной или нескольких панелей, организованных и расположенных в одной или нескольких строках для предоставления чёткого обзора релевантной информации. Эти панели могут запрашивать исходные данные из источников данных и преобразовывать их в ряд визуальных эффектов, поддерживаемых платформой.
Создание панели мониторинга
- Нажмите Create Dashboard, руководствуясь следующими инструкциями для настройки соответствующих параметров.
- После добавления нажмите Create для завершения создания панели. Далее необходимо добавить переменные, добавить панели и добавить группы для завершения общего дизайна компоновки.
Импорт панели
Платформа поддерживает прямой импорт JSON из Grafana для конвертации в панель мониторинга для отображения.
- В настоящее время поддерживается только Grafana JSON версии V8+; более низкие версии запрещены к импорту.
- Если в импортированной панели есть типы, не поддерживаемые платформой, они могут отображаться как unsupported panel types, но вы можете изменить настройки панели для нормального отображения.
- После импорта панели вы можете выполнять любые операции управления, как обычно, без отличий от панелей, созданных в платформе.
Добавление переменных
- В области формы переменных нажмите Add.
Query
Переменные типа Query позволяют фильтровать данные на основе признаков временных рядов. Выражение запроса можно задать для динамического вычисления и генерации результатов запроса.
Constant
Постоянные переменные — это статические переменные с фиксированными значениями, которые не меняются на протяжении всей панели, обычно используются для хранения идентификаторов окружения, фиксированных порогов или параметров конфигурации, которые нужно использовать в нескольких панелях без отображения в фильтрах.
Custom
Пользовательские переменные позволяют определить заранее заданный список статических опций, которые отображаются в виде выпадающих фильтров на панели, обычно используются для ручного выбора конкретных сервисов, команд или категорий без необходимости динамических запросов данных.
Textbox
Переменные типа Textbox позволяют пользователям вводить текст напрямую, обычно используются для указания конкретных значений или параметров, не требующих динамических запросов данных.
- Нажмите OK для добавления одной или нескольких переменных.
Добавление панелей
Добавьте несколько панелей в текущую созданную панель мониторинга для отображения данных по разным ресурсам.
Совет: Вы можете настроить размер панели, кликнув по её нижнему правому углу; клик по любой части панели позволяет изменить порядок панелей.
- Нажмите Add Panel, руководствуясь следующими инструкциями для настройки параметров.
-
Panel Preview: Область динамически отображает данные, соответствующие добавленным метрикам.
-
Add Metric: Настройте заголовок панели и метрики мониторинга в этой области.
-
Способ добавления: Поддерживается использование встроенных метрик или нативно настроенных метрик. Оба способа объединяются и действуют одновременно.
- Built-in Metrics: Выберите часто используемые метрики и параметры легенды, встроенные в платформу, для отображения данных в текущей панели.
- Примечание: Все метрики, добавленные в панель, должны иметь единый юнит; нельзя добавлять метрики с разными единицами в одну панель.
- Native: Настройте единицу метрики, выражение метрики и параметры легенды. Выражение метрики следует синтаксису PromQL; подробности смотрите в PromQL Official Documentation.
- Built-in Metrics: Выберите часто используемые метрики и параметры легенды, встроенные в платформу, для отображения данных в текущей панели.
-
Legend Parameters: Управляет именами, соответствующими кривым на панелях. Можно использовать текст или шаблоны:
- Правило: Вводимое значение должно быть в формате
{{.xxxx}}; например,{{.hostname}}заменится на значение метки hostname, возвращаемое выражением. - Совет: При вводе некорректного параметра легенды имена кривых будут отображаться в исходном формате.
- Правило: Вводимое значение должно быть в формате
-
Instant Switch: При включении переключателя Instant запрос будет выполняться через интерфейс Query Prometheus для мгновенных значений и сортироваться, как в статистических и gauge диаграммах. Если выключен — используется метод
query_rangeдля вычисления серии данных за определённый период. -
Panel Settings: Поддерживает выбор разных типов панелей для визуализации метрик. Смотрите Manage Panels.
-
Нажмите Save для завершения добавления панелей.
-
Вы можете добавить одну или несколько панелей в рамках панели мониторинга.
-
После добавления панелей доступны следующие операции для настройки отображения и размера:
- Клик по нижнему правому углу панели для настройки размера.
- Клик по любой части панели для изменения порядка панелей.
- Кнопка Edit для изменения настроек панели.
- Кнопка Delete для удаления панели.
- Кнопка Copy для копирования панели.
-
После настройки нажмите кнопку Save на странице панели для сохранения изменений.
Добавление групп
Группы — это логические разделители внутри панели, которые могут объединять панели вместе.
- Нажмите выпадающее меню Add Panel > Add Group и настройте параметры согласно инструкции.
- Group: Имя группы.
- Repeat: Поддерживает отключение повторов или выбор переменных для текущих панелей.
- Disable Repeat: Не выбирать переменную, использовать стандартную созданную группу.
- Parameter Variables: Выберите переменные, созданные в текущих панелях; панель мониторинга создаст строку идентичных подгрупп для каждого значения переменной. Подгруппы не поддерживают изменение, удаление или перемещение панелей.
- После добавления группы доступны следующие операции для управления отображением панелей внутри панели:
- Группы можно сворачивать или разворачивать для скрытия части содержимого. Панели в свернутых группах не отправляют запросы.
- Перемещайте панели в группу, чтобы они управлялись этой группой. Группа управляет всеми панелями между ней и следующей группой.
- При сворачивании группы можно перемещать все панели, управляемые этой группой, вместе.
- Сворачивание и разворачивание групп также считается изменением панели. Чтобы сохранить это состояние при следующем открытии, нажмите Save.
Переключение панелей
Установите созданную пользовательскую панель мониторинга как основную. При повторном входе в функцию мониторинга по умолчанию будет отображаться основная панель.
-
В левом навигационном меню выберите Operations Center > Monitoring > Monitoring Dashboards.
-
По умолчанию открывается основная панель мониторинга. Нажмите Switch Dashboard.
-
Вы можете найти панели, фильтруя по меткам или поиском по имени, и переключать основные панели с помощью переключателя Main Dashboard.
Другие операции
Вы можете нажать кнопку операций справа на странице панели для выполнения нужных действий.
Управление панелями
Платформа предоставляет различные методы визуализации для поддержки разных сценариев использования. В этом разделе представлены типы панелей, параметры настройки и способы использования.
Описание панелей
Описание параметров панели
Общие параметры
Специальные параметры для панелей
Создание панелей мониторинга через CLI
-
Создайте новый YAML-файл конфигурации с именем
example-dashboard.yaml. -
Добавьте ресурс MonitorDashboard в YAML-файл и отправьте его. Пример создания панели мониторинга с именем demo-v2-dashboard1:
Общие функции и переменные
Общие функции
При определении настроек запросов, помимо использования PromQL, платформа предоставляет следующие общие функции для удобства настройки:
Общие переменные
При определении настроек запросов вы можете комбинировать общие функции в переменные для быстрого создания пользовательских переменных. Ниже приведены распространённые определения переменных для справки:
Пример использования переменной 1
Использование функции query_result(query) для запроса значения: node_load5 и извлечения IP.
-
В Query Settings заполните
query_result(node_load5). -
В области Variable Value Preview пример превью:
node_load5{container="node-exporter",endpoint="metrics",host_ip="192.168.178.182",instance="192.168.178.182:9100"}. -
В Regular Expression заполните
/.*instance="(.*?):.*/для фильтрации значения. -
В области Variable Value Preview пример превью:
192.168.176.163.
Пример использования переменной 2
-
Добавьте первую переменную: namespace, используя функцию query_result(query) для запроса значения:
kube_namespace_labelsи извлечения namespace.- Query Settings:
query_result(kube_namespace_labels). - Variable Value Preview:
kube_namespace_labels{container="exporter-kube-state", endpoint="kube-state-metrics", instance="12.3.188.121:8080", job="kube-state", label_cpaas_io_project="cpaas-system", namespace="cert-manager", pod="kube-prometheus-exporter-kube-state-55bb6bc67f-lpgtx", project="cpaas-system", service="kube-prometheus-exporter-kube-state"}. - Regular Expression:
/.+namespace=\"(.*?)\".*/. - В области Variable Value Preview пример превью содержит несколько namespace, таких как
argocd,cpaas-systemи другие.
- Query Settings:
-
Добавьте вторую переменную: deployment, ссылаясь на ранее созданную переменную:
- Query Settings:
kube_deployment_spec_replicas{namespace=~"$namespace"}. - Regular Expression:
/.+deployment="(.*?)",.*/.
- Query Settings:
-
Добавьте панель в текущую панель и ссылайтесь на ранее добавленные переменные, например:
- Имя метрики: pod Memory Usage under Compute Components.
- Пара ключ-значение:
kind:Deployment,name:$deployment,namespace:$namespace.
-
После добавления и сохранения панелей вы можете просмотреть соответствующую информацию на главной странице панели.
Примечания при использовании встроенных метрик
Следующие метрики используют пользовательские переменные namespace, name и kind, которые не поддерживают множественный выбор или выбор всех.
namespaceподдерживает выбор только одного конкретного namespace;nameподдерживает только три типа вычислительных компонентов:deployment,daemonset,statefulset;kindподдерживает указание только одного из типов:Deployment,DaemonSet,StatefulSet.
-
workload.cpu.utilization -
workload.memory.utilization -
workload.network.receive.bytes.rate -
workload.network.transmit.bytes.rate -
workload.gpu.utilization -
workload.gpu.memory.utilization -
workload.vgpu.utilization -
workload.vgpu.memory.utilization