> ## Documentation Index
> Fetch the complete documentation index at: https://private-7c7dfe99-mintlify-8c05c8a2.mintlify.site/llms.txt
> Use this file to discover all available pages before exploring further.

> Системная таблица, содержащая трассировки стека, собранные выборочным профилировщиком запросов.

# system.trace_log

<Info>
  **Запросы в ClickHouse Cloud**

  Данные в этой системной таблице хранятся локально на каждом узле ClickHouse Cloud. Поэтому, чтобы получить полное представление обо всех данных, требуется функция `clusterAllReplicas`. Дополнительные сведения см. [здесь](/ru/reference/system-tables/overview#system-tables-in-clickhouse-cloud).
</Info>

<div id="description">
  ## Описание
</div>

Содержит трассировки стека, собранные [выборочным профилировщиком запросов](/ru/concepts/features/performance/troubleshoot/sampling-query-profiler).

ClickHouse создает эту таблицу, когда настроен раздел конфигурации сервера [trace\_log](/ru/reference/settings/server-settings/settings#trace_log). См. также настройки: [query\_profiler\_real\_time\_period\_ns](/ru/reference/settings/session-settings#query_profiler_real_time_period_ns), [query\_profiler\_cpu\_time\_period\_ns](/ru/reference/settings/session-settings#query_profiler_cpu_time_period_ns), [memory\_profiler\_step](/ru/reference/settings/session-settings#memory_profiler_step),
[memory\_profiler\_sample\_probability](/ru/reference/settings/session-settings#memory_profiler_sample_probability), [trace\_profile\_events](/ru/reference/settings/session-settings#trace_profile_events).

Для анализа журналов используйте функции интроспекции `addressToLine`, `addressToLineWithInlines`, `addressToSymbol` и `demangle`.

<div id="columns">
  ## Столбцы
</div>

* `hostname` ([LowCardinality(String)](/ru/reference/data-types/lowcardinality)) — Имя хоста сервера, выполняющего запрос.
* `event_date` ([Date](/ru/reference/data-types/date)) — Дата сэмплирования.
* `event_time` ([DateTime](/ru/reference/data-types/datetime)) — временная метка момента сэмплирования.
* `event_time_microseconds` ([DateTime64(6)](/ru/reference/data-types/datetime64)) — Временная метка момента сэмплирования с точностью до микросекунд.
* `timestamp_ns` ([UInt64](/ru/reference/data-types/int-uint)) — временная метка момента сэмплирования в наносекундах.
* `revision` ([UInt32](/ru/reference/data-types/int-uint)) — ревизия сборки сервера ClickHouse. При подключении к серверу с помощью `clickhouse-client` вы видите строку вида `Connected to ClickHouse server version 19.18.1.`. Это поле содержит `revision`, а не `version` сервера.
* `trace_type` ([Enum8('Real' = 0, 'CPU' = 1, 'Memory' = 2, 'MemorySample' = 3, 'MemoryPeak' = 4, 'ProfileEvent' = 5, 'JemallocSample' = 6, 'MemoryAllocatedWithoutCheck' = 7, 'Instrumentation' = 8)](/ru/reference/data-types/enum)) — Тип трассировки: `Real` означает сбор трассировок стека по астрономическому времени. `CPU` означает сбор трассировок стека по времени CPU. `Memory` означает сбор событий выделения и освобождения памяти, когда её выделение превышает следующую водяную метку. `MemorySample` означает сбор случайных событий выделения и освобождения памяти. `MemoryPeak` означает сбор обновлений пикового потребления памяти. `ProfileEvent` означает сбор приращений profile events. `JemallocSample` означает сбор сэмплов jemalloc. `MemoryAllocatedWithoutCheck` означает сбор значительных выделений памяти (>16MiB), который выполняется без учёта каких-либо ограничений памяти (только для разработчиков ClickHouse).`Instrumentation` означает трассы, собранные с помощью инструментирования через XRay.
* `cpu_id` ([UInt64](/ru/reference/data-types/int-uint)) — идентификатор процессора.
* `thread_id` ([UInt64](/ru/reference/data-types/int-uint)) — идентификатор потока.
* `thread_name` ([LowCardinality(String)](/ru/reference/data-types/lowcardinality)) — имя потока.
* `query_id` ([String](/ru/reference/data-types/string)) — идентификатор запроса, который можно использовать для получения сведений о выполнявшемся запросе из системной таблицы query\_log.
* `trace` ([Array(UInt64)](/ru/reference/data-types/array)) — трассировка стека на момент сэмплирования. Каждый элемент — виртуальный адрес памяти в процессе сервера ClickHouse.
* `size` ([Int64](/ru/reference/data-types/int-uint)) — для типов trace Memory, MemorySample, MemoryAllocatedWithoutCheck и MemoryPeak это объём выделенной памяти, для остальных типов trace — 0.
* `ptr` ([UInt64](/ru/reference/data-types/int-uint)) — адрес выделенного фрагмента.
* `memory_context` ([Enum8('Unknown' = -1, 'Global' = 0, 'User' = 1, 'Process' = 2, 'Thread' = 3, 'Max' = 4)](/ru/reference/data-types/enum)) — контекст трекера памяти (только для Memory/MemoryPeak): контекст `Unknown` не определён для данного trace\_type. `Global` обозначает контекст сервера. `User` обозначает контекст пользователя или слияния. `Process` обозначает контекст процесса (то есть запроса). `Thread` обозначает контекст потока (потока конкретного процесса). `Max` — это специальное значение, которое означает, что трекер памяти не заблокирован (для столбца blocked\_context).
* `memory_blocked_context` ([Enum8('Unknown' = -1, 'Global' = 0, 'User' = 1, 'Process' = 2, 'Thread' = 3, 'Max' = 4)](/ru/reference/data-types/enum)) — Контекст, для которого заблокирован трекер памяти (только для разработчиков ClickHouse): контекст `Unknown` не определён для этого trace\_type. `Global` обозначает контекст сервера. `User` обозначает контекст пользователя/слияния. `Process` обозначает контекст процесса (то есть запроса). `Thread` обозначает контекст потока (потока конкретного процесса). `Max` — специальное значение, которое означает, что трекер памяти не заблокирован (для столбца `blocked&#95;context`).
* `event` ([LowCardinality(String)](/ru/reference/data-types/lowcardinality)) — Для типа `trace` `ProfileEvent` это имя обновлённого события профиля, для других типов `trace` это пустая строка.
* `increment` ([Int64](/ru/reference/data-types/int-uint)) — для трассировки типа ProfileEvent это величина приращения события профиля, для остальных типов трассировки — 0.
* `symbols` ([Array(LowCardinality(String))](/ru/reference/data-types/array)) — Если символизация включена, содержит деманглированные имена символов, соответствующие `trace`. Символизацию можно включить или отключить с помощью настройки `symbolize` в разделе `trace_log` файла конфигурации сервера.
* `lines` ([Array(LowCardinality(String))](/ru/reference/data-types/array)) — Если символизация включена, содержит строки с именами файлов и номерами строк, соответствующими `trace`.
* `function_id` ([Nullable(Int32)](/ru/reference/data-types/nullable)) — Для типа trace Instrumentation — идентификатор, присвоенный функции в разделе xray\_instr\_map ELF-бинарного файла.
* `function_name` ([Nullable(String)](/ru/reference/data-types/nullable)) — Для Instrumentation типа trace — имя функции, в которую добавлена инструментация.
* `handler` ([Nullable(String)](/ru/reference/data-types/nullable)) — Для трассировок типа Instrumentation — обработчик функции с инструментированием.
* `entry_type` ([Nullable(Enum8('Entry' = 0, 'Exit' = 1))](/ru/reference/data-types/nullable)) — Для трассы типа Instrumentation: тип Entry/Exit инструментируемой функции.
* `duration_nanoseconds` ([Nullable(UInt64)](/ru/reference/data-types/nullable)) — для trace-типа Instrumentation: время выполнения функции в наносекундах.

**Псевдонимы:**

* `build_id` — псевдоним для `'E2EEB60ED9503BFFA825B628D480CCDC40B2D416'`.

Символизацию можно включить или отключить с помощью параметра `symbolize` в разделе `trace_log` файла конфигурации сервера.

<div id="example">
  ## Пример
</div>

```sql theme={null}
SELECT * FROM system.trace_log LIMIT 1 \G
```

```text theme={null}
Row 1:
──────
hostname:                clickhouse.eu-central1.internal
event_date:              2025-11-11
event_time:              2025-11-11 11:53:59
event_time_microseconds: 2025-11-11 11:53:59.128333
timestamp_ns:            1762862039128333000
revision:                54504
trace_type:              Instrumentation
cpu_id:                  19
thread_id:               3166432 -- 3,17 миллиона
query_id:                ef462508-e189-4ea2-b231-4489506728e8
trace:                   [350594916,447733712,447742095,447727324,447726659,221642873,450882315,451852359,451905441,451885554,512404306,512509092,612861767,612863269,612466367,612455825,137631896259267,137631896856768]
size:                    0
ptr:                     0
memory_context:          Unknown
memory_blocked_context:  Unknown
event:
increment:               0
symbols:                 ['StackTrace::StackTrace()','DB::InstrumentationManager::createTraceLogElement(DB::InstrumentationManager::InstrumentedPointInfo const&, XRayEntryType, std::__1::chrono::time_point<std::__1::chrono::system_clock, std::__1::chrono::duration<long long, std::__1::ratio<1l, 1000000l>>>) const','DB::InstrumentationManager::profile(XRayEntryType, DB::InstrumentationManager::InstrumentedPointInfo const&)','DB::InstrumentationManager::dispatchHandlerImpl(int, XRayEntryType)','DB::InstrumentationManager::dispatchHandler(int, XRayEntryType)','__xray_FunctionEntry','DB::QueryMetricLog::startQuery(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char>> const&, std::__1::chrono::time_point<std::__1::chrono::system_clock, std::__1::chrono::duration<long long, std::__1::ratio<1l, 1000000l>>>, unsigned long)','DB::logQueryStart(std::__1::chrono::time_point<std::__1::chrono::system_clock, std::__1::chrono::duration<long long, std::__1::ratio<1l, 1000000l>>> const&, std::__1::shared_ptr<DB::Context> const&, std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char>> const&, unsigned long, std::__1::shared_ptr<DB::IAST> const&, DB::QueryPipeline const&, DB::IInterpreter const*, bool, std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char>> const&, std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char>> const&, bool)','DB::executeQueryImpl(char const*, char const*, std::__1::shared_ptr<DB::Context>, DB::QueryFlags, DB::QueryProcessingStage::Enum, std::__1::unique_ptr<DB::ReadBuffer, std::__1::default_delete<DB::ReadBuffer>>&, std::__1::shared_ptr<DB::IAST>&, std::__1::shared_ptr<DB::ImplicitTransactionControlExecutor>, std::__1::function<void ()>)','DB::executeQuery(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char>> const&, std::__1::shared_ptr<DB::Context>, DB::QueryFlags, DB::QueryProcessingStage::Enum)','DB::TCPHandler::runImpl()','DB::TCPHandler::run()','Poco::Net::TCPServerConnection::start()','Poco::Net::TCPServerDispatcher::run()','Poco::PooledThread::run()','Poco::ThreadImpl::runnableEntry(void*)','start_thread','__clone3']
lines:                   ['./build/../src/Common/StackTrace.cpp:395','./src/Common/StackTrace.h:62','./contrib/llvm-project/libcxx/include/__memory/shared_ptr.h:738','./build/./src/Interpreters/InstrumentationManager.cpp:257','./build/./src/Interpreters/InstrumentationManager.cpp:225','/home/ubuntu/ClickHouse/ClickHouse/build/programs/clickhouse','./build/./src/Interpreters/QueryMetricLog.cpp:0','./contrib/llvm-project/libcxx/include/__memory/shared_ptr.h:667','./build/./src/Interpreters/executeQuery.cpp:0','./build/./src/Interpreters/executeQuery.cpp:0','./contrib/llvm-project/libcxx/include/__memory/shared_ptr.h:744','./contrib/llvm-project/libcxx/include/__memory/shared_ptr.h:583','./build/../base/poco/Net/src/TCPServerConnection.cpp:54','../contrib/llvm-project/libcxx/include/__memory/unique_ptr.h:80','./build/../base/poco/Foundation/src/ThreadPool.cpp:219','../base/poco/Foundation/include/Poco/AutoPtr.h:77','/home/ubuntu/ClickHouse/ClickHouse/build/programs/clickhouse','/home/ubuntu/ClickHouse/ClickHouse/build/programs/clickhouse']
function_id:             231255
function_name:           DB::QueryMetricLog::startQuery(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char>> const&, std::__1::chrono::time_point<std::__1::chrono::system_clock, std::__1::chrono::duration<long long, std::__1::ratio<1l, 1000000l>>>, unsigned long)
handler:                 profile
entry_type:              Exit
duration_nanoseconds:   58435
```

<div id="chrome-event-trace-format">
  ## Преобразование в формат трассировки событий Chrome
</div>

Данные профилирования можно преобразовать в формат трассировки событий Chrome с помощью следующего запроса. Сохраните запрос в файл `chrome_trace.sql`:

```sql theme={null}
WITH traces AS (
    SELECT * FROM system.trace_log
    WHERE event_date >= today() AND trace_type = 'Instrumentation' AND handler = 'profile'
    ORDER BY event_time, entry_type
)
SELECT
    format(
        '{{"traceEvents": [{}\n]}}',
        arrayStringConcat(
            groupArray(
                format(
                    '\n{{"name": "{}", "cat": "clickhouse", "ph": "{}", "ts": {}, "pid": 1, "tid": {}, "args": {{"query_id": "{}", "cpu_id": {}, "stack": [{}]}}}},',
                    function_name,
                    if(entry_type = 0, 'B', 'E'),
                    timestamp_ns/1000,
                    toString(thread_id),
                    query_id,
                    cpu_id,
                    arrayStringConcat(arrayMap((x, y) -> concat('"', x, ': ', y, '", '), lines, symbols))
                )
            )
        )
    )
FROM traces;
```

И выполнить его в клиенте ClickHouse, чтобы экспортировать в файл `trace.json`, который затем можно импортировать либо в [Perfetto](https://ui.perfetto.dev/), либо в [speedscope](https://www.speedscope.app/).

```bash theme={null}
echo $(clickhouse client --query "$(cat chrome_trace.sql)") > trace.json
```

Мы можем опустить часть со стеком, если нужна более компактная, но менее информативная трассировка.

<div id="see-also">
  ## См. также
</div>

* [SYSTEM INSTRUMENT](/ru/reference/statements/system#instrument) — Добавить или удалить точки инструментирования.
* [system.instrumentation](/ru/reference/system-tables/instrumentation) — Просмотреть инструментированные точки.
* [system.symbols](/ru/reference/system-tables/symbols) — Просмотреть символы для добавления точек инструментирования.
