psql_lockmon
Расширение для мониторинга блокировки.
Схема размещения:
ext.Расширение реализовано в виде двух дополнительных представлений, основанных на
pg_locks и pg_stat_activity, которые вносят минимальный вклад в блокировки объектов. Информация, выводимая представлениями, исключает собственные зависимости и блокировки.Назначение модуля:
- оперативный анализ блокировок сессий;
- выявление слабых мест производительности.
Решение предоставляет следующие объекты:
-
locks_plain:
Поле Тип Описание locktypetextТип блокируемого объекта:
–relation(отношение);
–extend(расширение отношения);
–frozenid(замороженный идентификатор);
–page(страница);
–tuple(кортеж);
–transactionid(идентификатор транзакции);
–virtualxid(виртуальный идентификатор);
–object(объект);
–userlock(пользовательская блокировка);
–advisory(рекомендательная)relationtext– Отношение, являющееся целью блокировки. NULL, если целью блокировки не является отношение или его часть.
Перед именем отношения указывается признак репликации объекта и его тип.
Признаки репликации:
–Ordinary: обычные объекты;
–Unlogged: объекты, созданные с признакомUnlogged, или их зависимости;
–Temporary: объекты, созданные с признакомTemporary, или их зависимости;
Типы объектов:
–Table: таблицы;
–Index: индексы, включаяprimary key;
–Sequence: последовательности;
–TOAST:TOASTтаблицы;
–View: представления;
–MatView: материализованные представления;
–CompositeType: составные типы;
–ForeignTable: внешние таблицы;
–PartitionedTable: партиции;
–PartitionedIndex: индексы партицийpageint4Номер страницы в отношении, являющейся целью блокировки, либо NULL, если цель блокировки не страница или кортеж отношенияtupleint2Номер кортежа на странице, являющегося целью блокировки, либо NULL, если цель блокировки не кортежvirtualxidtextВиртуальный идентификатор транзакции, являющийся целью блокировки, либо NULL, если цель блокировки — другой объектtransactionidxidИдентификатор транзакции, являющийся целью блокировки, либо NULL, если цель блокировки — другой объектclassidoidOIDсистемного каталогаpg_class, содержащего цель блокировки, либоNULL, если цель блокировки не обычный объект базы данныхobjidoidOIDцели блокировки в соответствующем системном каталоге, либоNULL, если цель блокировки не обычный объект базы данныхobjsubidint2– Номер столбца, являющегося целью блокировки (на саму таблицу указывают classidиobjid);
–0(ноль), если это некоторый другой обычный объект базы данных;
–NULL, если целью не является обычный объектvirtualtransactiontextВиртуальный идентификатор транзакции, удерживающей или ожидающей блокировку pidint4Идентификатор серверного процесса (PID, Process ID), удерживающего или ожидающего эту блокировку, либо NULL, если блокировка удерживается подготовленной транзакциейblocking_pidstextСписок идентификаторов серверных процессов, удерживающих блокировки, необходимые процессу (через точку с запятой) safe_snapshot_blocking_pidstextСписок идентификаторов серверных процессов, удерживающих блокировки, необходимые процессу, с установленным уровнем изоляции транзакции SERIALIZABLEилиREPEATABLE READ(через точку запятой)modetextНазвание режима блокировки, которая удерживается или запрашивается процессом grantedboolTrue– блокировка получена;false– блокировка ожидаетсяfastpathboolTrue– блокировка получена по короткому пути;false– блокировка получена через основную таблицу блокировокdatabasename– База данных, к которой относится цель блокировки;
–0(ноль), если разделяемый объект;
–NULL, если целью является идентификатор транзакцииusernamenameИмя пользователя, создавшего подключение.
ВНИМАНИЕ: переключение ролей черезSET ROLE,SET SESSION AUTHORIZATIONне меняют отображаемого имени пользователяclient_app_nametextНазвание приложения, подключенного к этому серверному процессу client_addrtextIP-адрес клиента, подключенного к этому серверному процессу.
Значения:
–nullозначает, что клиент подключен как внутренний процесс (автоочистка);
–-1означает, что клиент подключен через сокет Unix на стороне сервераsslboolTrue– подключение произведено с использованием SSL;False– подключение произведено без SSLsslversiontextВерсия TLS, при наличии sslciphertextИспользуемый алгоритм шифрования, при наличии sslbitsint4Длина ключа SSL, при наличии sslcompressionboolПризнак использования сжатия SSL соединения, при наличии sslclientdntextЗначение поля CN сертификата клиента, при наличии backend_xidxidИдентификатор верхнего уровня транзакции этого серверного процесса или любой другой backend_xminxidТекущая граница xminдля серверного процессаbackend_typetextТип текущего серверного процесса.
Возможные варианты:
–autovacuum launcher;
–autovacuum worker;
–logical replication launcher;
–logical replication worker;
–parallel worker;
–background writer;
–client backend;
–checkpointer;
–startup;
–walreceiver;
–walsender;
–walwriter
Фоновые рабочие процессы, регистрируемые расширениями, могут иметь дополнительные типыbackend_ageintervalВремя, прошедшее с момента запуска процесса. Для процессов, обслуживающих клиентов, это время подключения клиента к серверу xact_ageintervalВремя, прошедшее с начала текущей транзакции в этом процессе или nullпри отсутствии активной транзакции. Если текущий запрос был первым в своей транзакции, то значение в этом столбце совпадает со значением столбцаquery_agequery_ageintervalВремя, прошедшее с начала выполнения активного в данный момент запроса, или, если stateнеactive, то время начала выполнения последнего запросаstate_change_ageintervalВремя, прошедшее с последнего изменения состояния (поле state)transaction_last_commit_ageintervalВремя, прошедшее с фиксации последней транзакции (при включенном параметре track_commit_timestamp) wait_event_typetextТип события, которого ждет обслуживающий процесс, если это имеет место; в противном случае — NULLwait_eventtextИмя ожидаемого события, если обслуживающий процесс находится в состоянии ожидания, а в противном случае — NULLstatetextОбщее текущее состояние этого серверного процесса:
–active: серверный процесс выполняет запрос;
–idle: серверный процесс ожидает новой команды от клиента;
–idle in transaction: серверный процесс находится внутри транзакции, но в настоящее время не выполняет никакой запрос;
–idle in transaction(aborted): состояние подобноidle in transaction, за исключением того, что один из операторов в транзакции вызывал ошибку;
–fastpath function call: серверный процесс выполняет fast-path функцию;
–disabled: состояние отображается для серверных процессов, у которых параметр track_activities отключенquerytextТекст последнего запроса этого серверного процесса -
Представление locks_tree:
Поле Тип Описание main_pidint4Идентификатор серверного процесса (PID, Process ID), удерживающего блокировку pidint4Идентификатор серверного процесса (PID, Process ID), ожидающего эту блокировку lock_queuetextСписок идентификаторов процессов, ожидающих блокировку, созданную процессом main_pid, разделенных знаком>locktypetextТип блокируемого объекта: relation– отношение;extend– расширение отношения;frozenid– замороженный идентификатор;page– страница;tuple– кортеж;transactionid– идентификатор транзакции;virtualxid– виртуальный идентификатор;object– объект;userlock– пользовательская блокировка;advisory– рекомендательнаяrelationtext– Отношение, являющееся целью блокировки;
–NULL, если целью блокировки не является отношение или его часть.
Перед именем отношения указывается признак репликации объекта и его тип.
Признаки репликации:
–Ordinary: обычные объекты;
–Unlogged: объекты, созданные с признакомUnlogged, или их зависимости;
–Temporary: объекты, созданные с признакомTemporary, или их зависимости;
Типы объектов:
–Table: таблицы;
–Index: индексы, включаяprimary key;
–Sequence: последовательности;
–TOAST:TOASTтаблицы;
–View: представления;
–MatView: материализованные представления;
–CompositeType: составные типы;
–ForeignTable: внешние таблицы;
–PartitionedTable: партиции;
–PartitionedIndex: индексы партицийmodetextНазвание режима блокировки, которая удерживается или запрашивается процессом usernamenameИмя пользователя, создавшего подключение.
ВНИМАНИЕ: переключение ролей черезSET ROLE,SET SESSION AUTHORIZATIONне меняют отображаемого имени пользователяdatabasename– База данных, к которой относится цель блокировки;
–0(ноль), если разделяемый объект;
–NULL, если целью является идентификатор транзакцииclient_app_nametextНазвание приложения, подключенного к этому серверному процессу client_addrtextIP-адрес клиента, подключенного к этому серверному процессу.
Значения:
–nullозначает, что клиент подключен как внутренний процесс (автоочистка);
–-1означает, что клиент подключен через сокет Unix на стороне сервераxact_ageintervalВремя, прошедшее с начала текущей транзакции в этом процессе или nullпри отсутствии активной транзакции. Если текущий запрос был первым в своей транзакции, то значение в этом столбце совпадает со значением столбцаquery_agequery_ageintervalВремя, прошедшее с начала выполнения активного в данный момент запроса, или, если stateнеactive, то время начала выполнения последнего запросаstate_change_ageintervalВремя, прошедшее с последнего изменения состояния (поле state)wait_eventtextИмя ожидаемого события, если обслуживающий процесс находится в состоянии ожидания, а в противном случае — NULLstatetextОбщее текущее состояние этого серверного процесса:
–active: серверный процесс выполняет запрос;
–idle: серверный процесс ожидает новой команды от клиента;
–idle in transaction: серверный процесс находится внутри транзакции, но в настоящее время не выполняет никакой запрос;
–idle in transaction(aborted): состояние подобноidle in transaction, за исключением того, что один из операторов в транзакции вызывал ошибку;
–fastpath function call: серверный процесс выполняет fast-path функцию;
–disabled: состояние отображается для серверных процессов, у которых параметр track_activities отключенquerytextТекст последнего запроса этого серверного процесса
Область видимости ограничена полномочиями пользователя, который выполняет запрос к представлениям и базе данных.
В целях ограничения длительных запросов глубина очереди ограничена в 1000 pid (глубина вложенности pid).
Расширение, в первую очередь, предназначено для оперативного анализа блокировок сессий и выявления слабых мест производительности.
-
Построение дерева блокировок определенной сессии с целью определить блокирующую и устранить ее:
SELECT * FROM locks_tree WHERE blocked_pid=<pid>;Построение дерева блокировок для сессии с определеннымpid. Идентификатор блокирующей сессии будет определен в полеmain_pid, список заблокированных сессий - в полеlock_tree. Отсутствие записей означает, что сессия не заблокирована. -
Построение дерева блокировок всех сессий, используя существующие представления, с целью определить заблокированные сессии и устранить блокировки:
SELECT * FROM locks_tree;Идентификатор блокирующей сессии будет определен в полеmain_pid, список заблокированных сессий - в полеlock_tree. -
Список заблокированных процессов:
SELECT DISTINCT blocked_pid FROM locks_tree;Будет получен списокpidпроцессов, ожидающих блокировки. Если заблокированные процессы отсутствуют, будет получен пустой список.Пример вывода результата выполнения запроса:blocked_pid ------------- 8053 (2 rows) -
Список блокирующих процессов:
SELECT DISTINCT main_pid FROM locks_tree;Будет получен списокpidпроцессов, блокирующих другие процессы. Будет получен пустой список, если блокирующие процессы отсутствуют.Пример вывода результата выполнения запроса:main_pid ---------- 7576 (1 row) -
Максимальная длительность блокировки:
SELECT blocked_pid, max (state_change_age) FROM locks_tree WHERE blocked_pid NOTNULL GROUP BY 1 ORDER BY 2 DESC,1 LIMIT 1;Будут полученыpidзаблокированного процесса и длительность блокировки.Пример вывода результата выполнения запроса:blocked_pid | max -------------+----------------- 8053 | 00:25:24.556964 (1 row) -
Поиск по логам текста запроса, приведшего к блокировке (требует прав
pg_read_all_stats):SELECT DISTINCT t1.main_pid, current_timestamp-t1.xact_age, current_timestamp-t2.state_change_age FROM locks_tree t1 JOIN locks_tree t2 USING(main_pid) WHERE t1.lock_depth=1 AND t2.lock_depth=2;Поскольку в поляхqueryотображается последний выполненный запрос, то для выявления блокирующего запроса стоит восстановить ретроспективу по логам базы данных. Для этого необходимы:pidблокирующего процесса;- время начала транзакции в процессе;
- время начала ожидания блокировки.
Пример вывода результата выполнения запроса:main_pid | ?column? | ?column? ----------+-------------------------------+------------------------------- 7576 | 2023-03-23 10:42:52.409485+03 | 2023-03-23 12:04:39.150078+03 (1 row)В результате запроса полученыpidблокирующего процесса и диапазоны времени для поиска по логам. -
Принудительное завершение серверных сессий, приводящих к длительным блокировкам (требует прав
pg_signal_backend).SELECT DISTINCT main_pid, pg_terminate_backend (main_pid) FROM locks_tree WHERE lock_depth=2 AND state_change_age > interval '30 minutes';В примере запрос принудительно завершает процессы, приводящие к блокировкам длительностью более 30 минут.Пример вывода результата выполнения запроса:main_pid | pg_terminate_backend ----------+---------------------- 7576 | t (1 row)