system.processors_profile_log

ClickHouse Cloud でのクエリ実行

このシステムテーブルのデータは、ClickHouse Cloud の各ノードにローカルに格納されています。そのため、すべてのデータを包括的に確認するには、clusterAllReplicas 関数を使用する必要があります。詳細についてはこちらを参照してください。

このテーブルには、プロセッサーレベルのプロファイリング情報が含まれます（EXPLAIN PIPELINE で確認できます）。

列:

hostname (LowCardinality(String)) — クエリを実行しているサーバーのホスト名。
event_date (Date) — イベントが発生した日付。
event_time (DateTime) — イベントが発生した日時。
event_time_microseconds (DateTime64) — イベントが発生した日時（マイクロ秒精度）。
id (UInt64) — プロセッサーの ID。
parent_ids (Array(UInt64)) — 親プロセッサーの ID の配列。
plan_step (UInt64) — このプロセッサーを作成したクエリプランステップの ID。プロセッサーがどのステップからも追加されていない場合、この値は 0。
plan_group (UInt64) — クエリプランステップによって作成された場合のプロセッサーのグループ。同一のクエリプランステップから追加されたプロセッサーを論理的にグループ化するためのものです。グループは EXPLAIN PIPELINE の結果を見やすくする目的にのみ使用されます。
initial_query_id (String) — 初期クエリの ID（分散クエリ実行用）。
query_id (String) — クエリの ID。
name (LowCardinality(String)) — プロセッサー名。
elapsed_us (UInt64) — このプロセッサーが実行されていた時間（マイクロ秒単位）。
input_wait_elapsed_us (UInt64) — このプロセッサーが（別のプロセッサーからの）データを待機していた時間（マイクロ秒単位）。
output_wait_elapsed_us (UInt64) — 出力ポートがフルだったためにこのプロセッサーが待機していた時間（マイクロ秒単位）。
input_rows (UInt64) — プロセッサーが消費した行数。
input_bytes (UInt64) — プロセッサーが消費したバイト数。
output_rows (UInt64) — プロセッサーが生成した行数。
output_bytes (UInt64) — プロセッサーが生成したバイト数。

例

クエリ:

EXPLAIN PIPELINE
SELECT sleep(1)
┌─explain─────────────────────────┐
│ (Expression)                    │
│ ExpressionTransform             │
│   (SettingQuotaAndLimits)       │
│     (ReadFromStorage)           │
│     SourceFromSingleChunk 0 → 1 │
└─────────────────────────────────┘

SELECT sleep(1)
SETTINGS log_processors_profiles = 1
Query id: feb5ed16-1c24-4227-aa54-78c02b3b27d4
┌─sleep(1)─┐
│        0 │
└──────────┘
1 rows in set. Elapsed: 1.018 sec.

SELECT
    name,
    elapsed_us,
    input_wait_elapsed_us,
    output_wait_elapsed_us
FROM system.processors_profile_log
WHERE query_id = 'feb5ed16-1c24-4227-aa54-78c02b3b27d4'
ORDER BY name ASC

結果:

┌─name────────────────────┬─elapsed_us─┬─input_wait_elapsed_us─┬─output_wait_elapsed_us─┐
│ ExpressionTransform     │    1000497 │                  2823 │                    197 │
│ LazyOutputFormat        │         36 │               1002188 │                      0 │
│ LimitsCheckingTransform │         10 │               1002994 │                    106 │
│ NullSource              │          5 │               1002074 │                      0 │
│ NullSource              │          1 │               1002084 │                      0 │
│ SourceFromSingleChunk   │         45 │                  4736 │                1000819 │
└─────────────────────────┴────────────┴───────────────────────┴────────────────────────┘

ここでは次のことがわかります:

ExpressionTransform は sleep(1) 関数を実行していたため、その work に 1e6 us がかかり、その結果 elapsed_us > 1e6 となります。
SourceFromSingleChunk は待機する必要があります。これは、ExpressionTransform が sleep(1) の実行中はデータを一切受け付けないためで、その 1e6 us のあいだ PortFull 状態となり、結果として output_wait_elapsed_us > 1e6 となります。
LimitsCheckingTransform/NullSource/LazyOutputFormat は、結果を処理するために ExpressionTransform が sleep(1) の実行を完了するまで待機する必要があるため、input_wait_elapsed_us > 1e6 となります。

関連項目

EXPLAIN PIPELINE