Postgres DBA

6

kznalp

Postgres DBA

Серия СУБД PostgreSQL

PG_HAZEL : Использование корреляционного анализа ожиданий СУБД и метрик ОС для определения причин деградации производительности СУБД⁠⁠

3 месяца назад

Взято с основного технического канала Postgres DBA (возможны правки в исходной статье).

Правильно настроенный агрегат - быстрее.

Задача

Провести корреляционный анализ ожиданий СУБД PostgreSQL и метрик Операционной системы для определения корневой причины деградации производительности СУБД.

Используемая методика корреляционного анализа

Корреляция ожиданий СУБД PostgreSQL и значений VMSTAT

Результаты нагрузочного тестирования виртуальной машины-06

PG_HAZEL : Анализ результатов нагрузочного тестирования для малой ВМ

Операционная скорость

Ось X - точка наблюдения . Ось Y - операционная скорость

Корреляционный анализ ожиданий СУБД и метрик ОС

Результаты нагрузочного тестирования виртуальной машины-12

PG_HAZEL : Анализ результатов нагрузочного тестирования для большой ВМ

Операционная скорость

Ось X - точка наблюдения . Ось Y - операционная скорость

Корреляционный анализ ожиданий СУБД и метрик ОС

Показать полностью 4

1

2

kznalp

Postgres DBA

Серия СУБД PostgreSQL

PG_HAZEL : Чек-лист подсистемы IO c использованием корреляционного анализа результатов IOSTAT⁠⁠

3 месяца назад

Взято с основного технического канала Postgres DBA (возможны правки в исходной статье).

Задача

Провести аудит подсистемы IO по результатам нагрузочного тестирования СУБД , используя корреляционный анализ результатов iostat.

PG_HAZEL : Чек-лист подсистемы IO c использованием корреляционного анализа результатов IOSTAT(виртуальная машина-06)

Минимальные и максимальные значение: Файловая система /data

wa (I/O wait): Важный показатель! Процент времени, в течение которого процессор простаивал в ожидании завершения операций I/O.
%util: Процент времени, когда устройство было занято обработкой I/O-запросов
buff: Объем памяти, используемой буферами (буферизация данных для записи на диск).
cache: Объем памяти, используемой кэшем (кэширование данных, прочитанных с диска). Свободная память = free + buff + cache (ядло освободит буферы и кэш при необходимости).
r/s: Количество операций чтения (запросов) в секунду
rMB/s: Объем данных, прочитанных с устройства в мегабайтах в секунду
w/s: Количество операций записи (запросов) в секунду
wMB/s: Объем данных, записанных на устройство в мегабайтах в секунду
r_await: Среднее время чтения (в миллисекундах).
w_await: Среднее время записи (в миллисекундах).
aqu-sz: Средняя длина очереди запросов к устройству. Значение больше 0 может указывать на накопление запросов.

Корреляционный анализ: Файловая система /data

PG_HAZEL : Чек-лист подсистемы IO c использованием корреляционного анализа результатов IOSTAT(виртуальная машина-12)

Минимальные и максимальные значение: Файловая система /data

wa (I/O wait): Важный показатель! Процент времени, в течение которого процессор простаивал в ожидании завершения операций I/O.
%util: Процент времени, когда устройство было занято обработкой I/O-запросов
buff: Объем памяти, используемой буферами (буферизация данных для записи на диск).
cache: Объем памяти, используемой кэшем (кэширование данных, прочитанных с диска). Свободная память = free + buff + cache (ядло освободит буферы и кэш при необходимости).
r/s: Количество операций чтения (запросов) в секунду
rMB/s: Объем данных, прочитанных с устройства в мегабайтах в секунду
w/s: Количество операций записи (запросов) в секунду
wMB/s: Объем данных, записанных на устройство в мегабайтах в секунду
r_await: Среднее время чтения (в миллисекундах).
w_await: Среднее время записи (в миллисекундах).
aqu-sz: Средняя длина очереди запросов к устройству. Значение больше 0 может указывать на накопление запросов.

Корреляционный анализ: Файловая система /data

Показать полностью 4

[моё] Субд Postgresql Тестирование Анализ Длиннопост

0

kznalp

Postgres DBA

Серия СУБД PostgreSQL

PG_HAZEL vs PGPRO_PWR⁠⁠

3 месяца назад

Cравнительный анализ преимуществ комплекса pg_hazel перед системой pgpro_pwr в контексте мониторинга производительности PostgreSQL

Мониторинг производительности базы данных играет ключевую роль в управлении эффективностью и надежностью современных информационных систем. Своевременное обнаружение узких мест, оптимизация структуры запросов и настройка параметров системы помогают поддерживать высокий уровень работоспособности приложений, работающих с большими объемами данных.

На сегодняшний день рынок предлагает множество инструментов для мониторинга и анализа производительности PostgreSQL — одной из самых распространенных систем управления реляционными данными (СУБД).

В частности, заслуживают внимания такие продукты, как комплекс pg_hazel и система pgpro_pwr, которые широко используются в корпоративных инфраструктурах.

Настоящий материал посвящен детальному сравнению этих двух решений и выяснению их сильных сторон применительно к задачам повышения производительности PostgreSQL.

Подробности : pg_hazel vs pgpro_pwr

Показать полностью 1

Субд Postgresql

1

3

kznalp

Postgres DBA

Серия СУБД PostgreSQL

PG_HAZEL : Реальные кейсы использования чек-листа инфраструктуры СУБД PostgreSQL при инцидентах производительности СУБД⁠⁠

3 месяца назад

Взято с основного технического канала Postgres DBA (возможны правки в исходной статье).

Инфраструктура это фундамент нормальной работы СУБД

Задача

Практическое применение методики анализа состояния инфраструктуры при решении инцидентов производительности СУБД.

PG_HAZEL : Чек-лист инфраструктуры СУБД при инциденте производительности. Случай №1 - CPU + RAM.

Инцидент

IO - OK

CPU - есть проблемы

Переключения контекста могут быть вызваны прерываниями.
Возможно проблема в пользовательском приложении(resource contention).

RAM - есть проблемы

Свободная RAM менее 5%

PG_HAZEL : Чек-лист инфраструктуры СУБД при инциденте производительности. Случай №2 - CPU + RAM.

Инцидент

IO - OK

CPU - есть проблемы

Переключения контекста могут быть вызваны прерываниями.
Возможно проблема в пользовательском приложении(resource contention).
Ядро тратит много времени на переключение контекста и планирование, вместо полезной работы.