Telemetria do Lakebase nas tabelas do sistema

info

Beta

Esse recurso está em Beta. Para usá-lo, um administrador do workspace deve ativar Observabilidade do Lakebase em tabelas do sistema na página Pré-visualizações . Consulte Gerenciar prévias do Databricks.

O Lakebase captura sua telemetria de observabilidade no esquema system.lakebase, começando com sinais avançados do Postgres. A captura é automática. Com essa visualização habilitada, a telemetria é direcionada a essas tabelas enquanto o compute de um projeto é executado. Não há configuração para criar, nenhum destino para escolher e nenhuma credencial para fornecer. Percepções e Genie leem as mesmas tabelas, e você pode consultar com qualquer ferramenta do Databricks.

nota

Os nomes de tabelas e colunas podem mudar antes da disponibilidade geral.

Requisitos

• A pré-visualização de Observabilidade do Lakebase nas Tabelas do Sistema está habilitada para seu workspace.
• Um projeto do Lakebase no AWS ou no Azure. Consulte Obter um banco de dados Postgres.

O que é capturado

O Lakebase registra os sinais necessários para explicar um banco de dados lento ou com falhas, nas seguintes tabelas:

O que é capturado	Nome da tabela
Sessões ativas e eventos de espera	system.lakebase.active_session_history, system.lakebase.wait_event_counters
Planos de query e estatísticas de execução por query	system.lakebase.plan_history, system.lakebase.pg_stat_statements_counters
Alterações de esquema: o que mudou, quando e por quem	system.lakebase.ddl_history
Estatísticas do banco de dados: tamanho, linhas lidas e modificadas, e contagens de sessão	system.lakebase.database_counters, system.lakebase.database_gauges
Uso de recursos de compute: CPU, memória, cache, conexões	system.lakebase.compute_counters, system.lakebase.compute_gauges
Mensagens de log brutas do Postgres, incluindo o erro por trás de uma falha	system.lakebase.postgres_logs

O que é capturado	Nome da tabela
Sessões ativas e eventos de espera	system.lakebase.active_session_history, system.lakebase.wait_event_counters
Planos de query e estatísticas de execução por query	system.lakebase.plan_history, system.lakebase.pg_stat_statements_counters
Alterações de esquema: o que mudou, quando e por quem	system.lakebase.ddl_history
Estatísticas do banco de dados: tamanho, linhas lidas e modificadas, e contagens de sessão	system.lakebase.database_counters, system.lakebase.database_gauges
Uso de recursos de compute: CPU, memória, cache, conexões	system.lakebase.compute_counters, system.lakebase.compute_gauges
Mensagens de log brutas do Postgres, incluindo o erro por trás de uma falha	system.lakebase.postgres_logs

Os registros são retidos por 7 dias. O restante desta página documenta cada coluna em cada tabela. Para saber onde essas tabelas se situam entre as outras tabelas do sistema, consulte a referência da tabela do sistema do Lakebase.

Acesso

The system.lakebase tables are governed by Unity Catalog. Users with both the account admin and metastore admin roles can read the telemetry and gerenciar access to it. See Manage privileges in Unity Catalog.

O acesso se aplica no nível do esquema, portanto, um usuário que pode ler system.lakebase vê a telemetria de cada projeto na account.

Texto da instrução mascarado

As colunas que contêm o texto da instrução retornam <REDACTED>, a menos que você seja um administrador de account ou membro do grupo no nível da account databricks_pii_access. Um administrador de conta cria e gerencia esse grupo. Consulte Create and gerenciar the databricks_pii_access group e Access masked statement text.

Colunas comuns a cada tabela

Cada tabela abaixo inclui estas colunas, que identificam a origem de uma linha:

Coluna	Tipo	Descrição
project_id	String	O projeto Lakebase de onde a linha veio.
branch_id	String	O branch de onde a linha veio.
endpoint_id	String	O Endpoint de compute de onde a linha veio.
compute_id	String	A instância de compute específica. Isso muda quando um compute escala para zero e é retomado.
ts	Timestamp	Quando a linha foi registrada.
compute_mode	String	O modo do compute no momento, por exemplo, leitura-gravação ou somente leitura.

Coluna	Tipo	Descrição
project_id	String	O projeto Lakebase de onde a linha veio.
branch_id	String	O branch de onde a linha veio.
endpoint_id	String	O Endpoint de compute de onde a linha veio.
compute_id	String	A instância de compute específica. Isso muda quando um compute escala para zero e é retomado.
ts	Timestamp	Quando a linha foi registrada.
compute_mode	String	O modo do compute no momento, por exemplo, leitura-gravação ou somente leitura.

Tabelas com nomes que terminam em _counters também incluem uma coluna previous_ts, marcando o início do intervalo em que os valores de uma linha se acumularam. Estes são valores cumulativos para esse intervalo, não leituras pontuais. Tabelas que terminam em _gauges são leituras pontuais, em vez disso, e não possuem previous_ts.

As tabelas abaixo listam apenas as colunas além destas comuns.

Atividade da sessão

Um Snapshot de cada back-end ativo, amostrado continuamente. Este é o mesmo padrão que as Percepções de Desempenho da AWS ou o Histórico de Sessão Ativa (ASH) da Oracle: se uma sessão estiver fazendo algo, incluindo esperar, ela aparece aqui.

active_session_history

Coluna	Tipo	Descrição
sample_seq	Long	Posição ordinal desta amostra dentro de seu lote.
pid	Long	O ID do processo do back-end.
datid	Long	ID do objeto do banco de dados.
userid	Long	O ID do objeto da função de conexão.
queryid	Long	Identifica a query em execução. Corresponde a queryid em pg_stat_statements_counters.
wait_event_info	Long	Codificação interna do evento de espera.
wait_event_type	String	A categoria do evento de espera, por exemplo Timeout ou Lock.
wait_event	String	O evento de espera específico, por exemplo PgSleep.
backend_state	Long	O estado do backend, por exemplo, ativo ou parado.
backend_type	Long	O tipo de processo de back-end.
xact_age_ms	Long	Há quanto tempo a transação atual está aberta.
query_age_ms	Long	Por quanto tempo a query atual está em execução.
blocking_pid	Long	O PID de uma sessão bloqueando esta, se houver.
leader_pid	Long	O PID do líder da query paralela, se este backend for um worker paralelo.
flags	Long	Sinalizadores de status internos.
plan_fingerprint	Long	Links para um formato de plano específico em plan_history.
appname_hash	Long	Um hash do nome do aplicativo de conexão.

Coluna	Tipo	Descrição
sample_seq	Long	Posição ordinal desta amostra dentro de seu lote.
pid	Long	O ID do processo do back-end.
datid	Long	ID do objeto do banco de dados.
userid	Long	O ID do objeto da função de conexão.
queryid	Long	Identifica a query em execução. Corresponde a queryid em pg_stat_statements_counters.
wait_event_info	Long	Codificação interna do evento de espera.
wait_event_type	String	A categoria do evento de espera, por exemplo Timeout ou Lock.
wait_event	String	O evento de espera específico, por exemplo PgSleep.
backend_state	Long	O estado do backend, por exemplo, ativo ou parado.
backend_type	Long	O tipo de processo de back-end.
xact_age_ms	Long	Há quanto tempo a transação atual está aberta.
query_age_ms	Long	Por quanto tempo a query atual está em execução.
blocking_pid	Long	O PID de uma sessão bloqueando esta, se houver.
leader_pid	Long	O PID do líder da query paralela, se este backend for um worker paralelo.
flags	Long	Sinalizadores de status internos.
plan_fingerprint	Long	Links para um formato de plano específico em plan_history.
appname_hash	Long	Um hash do nome do aplicativo de conexão.

Eventos de espera.

Contagens e tempo de eventos de espera agregados, complementando a view por amostra em active_session_history.

wait_event_counters

Coluna	Tipo	Descrição
wait_event_id	Long	Codificação interna do evento de espera.
wait_class_name	String	A categoria do evento de espera.
wait_event_name	String	O evento de espera específico.
wait_event_count	Long	Quantas vezes este evento de espera ocorreu no intervalo.
wait_event_time	double	Tempo total gasto neste evento de espera durante o intervalo.

Coluna	Tipo	Descrição
wait_event_id	Long	Codificação interna do evento de espera.
wait_class_name	String	A categoria do evento de espera.
wait_event_name	String	O evento de espera específico.
wait_event_count	Long	Quantas vezes este evento de espera ocorreu no intervalo.
wait_event_time	double	Tempo total gasto neste evento de espera durante o intervalo.

Planos de query

Um registro por execução de planos de query, incluindo o plano completo e as estatísticas de armazenamento específicas do Neon. Esta é a tabela mais detalhada, e tipicamente onde uma investigação de query lenta termina.

plan_history

Coluna	Tipo	Descrição
row_position	Long	Posição ordinal desta linha dentro de seu lote.
analyze_enabled	Booleana	Se o plano inclui estatísticas reais de execução (EXPLAIN ANALYZE), e não apenas estimativas.
buffers_enabled	Booleana	Se o plano inclui estatísticas de uso de buffer.
query_hash	String	Hash que identifica o texto da query.
queryid	Long	Identifica a query. Corresponde a queryid em pg_stat_statements_counters e active_session_history.
duration_ms	double	Quanto tempo a query levou para ser execução.
total_cost	double	O custo estimado do planejador para a query.
plan_rows	Long	A contagem estimada de linhas do planejador.
actual_rows	Long	A contagem real de linhas retornadas.
plan_fingerprint	Long	Identifica este formato de plano específico. Corresponde a plan_fingerprint em active_session_history.
lock_wait_time_ms	double	Tempo gasto em espera por bloqueios.
planning_time_ms	double	Tempo gasto no planejamento da query, separado da execução.
shared_blks_hit / shared_blks_read / shared_blks_dirtied / shared_blks_written	Long	Atividade de cache de buffer compartilhado para esta execução.
local_blks_hit / local_blks_read / local_blks_dirtied / local_blks_written	Long	Atividade de buffer local, para tabelas temporárias.
temp_blks_read / temp_blks_written	Long	Atividade de arquivo temporário, por exemplo, de uma classificação grande ou hash.
neon_getpage_count	Long	Número de solicitações de página enviadas para o pageserver.
neon_file_cache_hits	Long	Número de páginas servidas a partir do cache local de arquivos em vez do pageserver.
neon_getpage_wait_us	Long	Tempo gasto esperando solicitações de página do pageserver, em microssegundos.
backend_pid	Long	O ID do processo de backend que executou esta query.
lock_wait_count	Long	Número de vezes que esta execução aguardou um bloqueio.
userid / dbid	Long	Os IDs de objeto da função de conexão e do banco de dados.
query_text	String	O texto de query. Mascarado. Consulte Masked statement text.
plan_json	String	The full query plan, as JSON. Masked. See Masked statement text.
usename / datname	String	Os nomes da função de conexão e da base de dados.
application_name / client_addr	String	O nome do aplicativo de conexão e o endereço do cliente.
wait_events	String	Eventos de espera observados durante esta execução.
parameters	String	Vincule os parâmetros usados na query, se houver. Mascarado. Ver Texto da instrução mascarado.
blocking_pids	String	PIDs de sessões que bloquearam esta execução, se houver.
neon_branch_id / neon_endpoint_id / neon_timeline_id	String	Identificadores internos do Neon para a branch, o endpoint e a linha do tempo.
cpu_user_time_ms / cpu_sys_time_ms	double	Tempo de CPU consumido por esta execução, dividido em tempo de usuário e de sistema.
voluntary_csw / involuntary_csw	Long	Trocas de contexto durante esta execução.
trace_id / span_id / trace_flags / service_name	STRING / STRING / LONG / STRING	Identificadores de rastreamento no estilo OpenTelemetry, se a query fazia parte de uma solicitação rastreada.
timeline_id	Long	Identificador interno da linha do tempo.
truncated	Booleana	Se os dados desta linha (por exemplo, um plano grande) foram truncados antes de serem gravados.

Coluna	Tipo	Descrição
row_position	Long	Posição ordinal desta linha dentro de seu lote.
analyze_enabled	Booleana	Se o plano inclui estatísticas reais de execução (EXPLAIN ANALYZE), e não apenas estimativas.
buffers_enabled	Booleana	Se o plano inclui estatísticas de uso de buffer.
query_hash	String	Hash que identifica o texto da query.
queryid	Long	Identifica a query. Corresponde a queryid em pg_stat_statements_counters e active_session_history.
duration_ms	double	Quanto tempo a query levou para ser execução.
total_cost	double	O custo estimado do planejador para a query.
plan_rows	Long	A contagem estimada de linhas do planejador.
actual_rows	Long	A contagem real de linhas retornadas.
plan_fingerprint	Long	Identifica este formato de plano específico. Corresponde a plan_fingerprint em active_session_history.
lock_wait_time_ms	double	Tempo gasto em espera por bloqueios.
planning_time_ms	double	Tempo gasto no planejamento da query, separado da execução.
shared_blks_hit / shared_blks_read / shared_blks_dirtied / shared_blks_written	Long	Atividade de cache de buffer compartilhado para esta execução.
local_blks_hit / local_blks_read / local_blks_dirtied / local_blks_written	Long	Atividade de buffer local, para tabelas temporárias.
temp_blks_read / temp_blks_written	Long	Atividade de arquivo temporário, por exemplo, de uma classificação grande ou hash.
neon_getpage_count	Long	Número de solicitações de página enviadas para o pageserver.
neon_file_cache_hits	Long	Número de páginas servidas a partir do cache local de arquivos em vez do pageserver.
neon_getpage_wait_us	Long	Tempo gasto esperando solicitações de página do pageserver, em microssegundos.
backend_pid	Long	O ID do processo de backend que executou esta query.
lock_wait_count	Long	Número de vezes que esta execução aguardou um bloqueio.
userid / dbid	Long	Os IDs de objeto da função de conexão e do banco de dados.
query_text	String	O texto de query. Mascarado. Consulte Masked statement text.
plan_json	String	The full query plan, as JSON. Masked. See Masked statement text.
usename / datname	String	Os nomes da função de conexão e da base de dados.
application_name / client_addr	String	O nome do aplicativo de conexão e o endereço do cliente.
wait_events	String	Eventos de espera observados durante esta execução.
parameters	String	Vincule os parâmetros usados na query, se houver. Mascarado. Ver Texto da instrução mascarado.
blocking_pids	String	PIDs de sessões que bloquearam esta execução, se houver.
neon_branch_id / neon_endpoint_id / neon_timeline_id	String	Identificadores internos do Neon para a branch, o endpoint e a linha do tempo.
cpu_user_time_ms / cpu_sys_time_ms	double	Tempo de CPU consumido por esta execução, dividido em tempo de usuário e de sistema.
voluntary_csw / involuntary_csw	Long	Trocas de contexto durante esta execução.
trace_id / span_id / trace_flags / service_name	STRING / STRING / LONG / STRING	Identificadores de rastreamento no estilo OpenTelemetry, se a query fazia parte de uma solicitação rastreada.
timeline_id	Long	Identificador interno da linha do tempo.
truncated	Booleana	Se os dados desta linha (por exemplo, um plano grande) foram truncados antes de serem gravados.

Estatísticas da query

Estatísticas agregadas por query, obtidas da extensão padrão pg_stat_statements.

pg_stat_statements_counters

Coluna	Tipo	Descrição
userid / dbid	Long	Os IDs de objeto da função de conexão e do banco de dados.
queryid	Long	Identifica a query. Corresponde a queryid em plan_history e active_session_history.
toplevel	Booleana	Se esta linha é para uma instrução de nível superior, em oposição a uma aninhada dentro de uma função ou procedimento PL/pgSQL. Consulte a limitação do PL/pgSQL.
query	String	O texto de query. Mascarado. Consulte Masked statement text.
calls	Long	Número de vezes que esta query foi executada no intervalo.
plans	Long	Número de vezes que esta query foi planejada no intervalo.
rows	Long	Total de linhas retornadas ou afetadas.
total_exec_time / total_plan_time	double	Tempo total gasto executando e planejando esta query no intervalo.
shared_blks_hit / shared_blks_read / shared_blks_dirtied / shared_blks_written	Long	Atividade de cache de buffer compartilhada.
local_blks_hit / local_blks_read / local_blks_dirtied / local_blks_written	Long	Atividade de buffer local, para tabelas temporárias.
temp_blks_read / temp_blks_written	Long	Atividade de arquivos temporários.
wal_bytes / wal_fpi / wal_records	Long	Volume do log de transações gerado por esta query.
jit_emission_count / jit_emission_time / jit_functions / jit_generation_time / jit_inlining_count / jit_inlining_time / jit_optimization_count / jit_optimization_time	Misto	Estatísticas de compilação JIT (just-in-time), se JIT foi usado para esta query.

Coluna	Tipo	Descrição
userid / dbid	Long	Os IDs de objeto da função de conexão e do banco de dados.
queryid	Long	Identifica a query. Corresponde a queryid em plan_history e active_session_history.
toplevel	Booleana	Se esta linha é para uma instrução de nível superior, em oposição a uma aninhada dentro de uma função ou procedimento PL/pgSQL. Consulte a limitação do PL/pgSQL.
query	String	O texto de query. Mascarado. Consulte Masked statement text.
calls	Long	Número de vezes que esta query foi executada no intervalo.
plans	Long	Número de vezes que esta query foi planejada no intervalo.
rows	Long	Total de linhas retornadas ou afetadas.
total_exec_time / total_plan_time	double	Tempo total gasto executando e planejando esta query no intervalo.
shared_blks_hit / shared_blks_read / shared_blks_dirtied / shared_blks_written	Long	Atividade de cache de buffer compartilhada.
local_blks_hit / local_blks_read / local_blks_dirtied / local_blks_written	Long	Atividade de buffer local, para tabelas temporárias.
temp_blks_read / temp_blks_written	Long	Atividade de arquivos temporários.
wal_bytes / wal_fpi / wal_records	Long	Volume do log de transações gerado por esta query.
jit_emission_count / jit_emission_time / jit_functions / jit_generation_time / jit_inlining_count / jit_inlining_time / jit_optimization_count / jit_optimization_time	Misto	Estatísticas de compilação JIT (just-in-time), se JIT foi usado para esta query.

Alterações de esquema

Alterações de esquema: o que mudou, quando e por quem. Isso é o que o Genie lê para rastrear um incidente de volta a uma alteração de esquema, seja de uma implantação ou de uma edição manual.

ddl_history

Coluna	Tipo	Descrição
row_position	Long	Posição ordinal desta linha dentro de seu lote.
command_tag	String	O tipo de comando DDL, por exemplo ALTER TABLE.
object_type / object_name	String	O tipo e o nome do objeto que mudou.
schema_name	String	O esquema do Postgres ao qual o objeto pertence.
query_text	String	A instrução DDL completa. Mascarado. Consulte Texto da instrução mascarado.
duration_ms	double	Quanto tempo a instrução DDL levou para ser executada.
userid / usename	LONG / STRING	O ID e o nome do objeto da função de conexão.
application_name	String	O nome do aplicativo de conexão.
backend_pid	Long	O ID do processo de backend que executou a instrução.
dbid	Long	ID do objeto do banco de dados.
search_path	String	O caminho de busca da sessão na época.
ddl_json	String	Uma representação estruturada e analisada da instrução DDL. Mascarado. Consulte Texto da instrução mascarado.

Coluna	Tipo	Descrição
row_position	Long	Posição ordinal desta linha dentro de seu lote.
command_tag	String	O tipo de comando DDL, por exemplo ALTER TABLE.
object_type / object_name	String	O tipo e o nome do objeto que mudou.
schema_name	String	O esquema do Postgres ao qual o objeto pertence.
query_text	String	A instrução DDL completa. Mascarado. Consulte Texto da instrução mascarado.
duration_ms	double	Quanto tempo a instrução DDL levou para ser executada.
userid / usename	LONG / STRING	O ID e o nome do objeto da função de conexão.
application_name	String	O nome do aplicativo de conexão.
backend_pid	Long	O ID do processo de backend que executou a instrução.
dbid	Long	ID do objeto do banco de dados.
search_path	String	O caminho de busca da sessão na época.
ddl_json	String	Uma representação estruturada e analisada da instrução DDL. Mascarado. Consulte Texto da instrução mascarado.

nota

A captura DDL tem uma lacuna real: uma alteração feita no momento em que um compute é retomado de uma escala para zero pode ser perdida. Se uma alteração de esquema não aparecer aqui, mesmo que você saiba que ela aconteceu, essa é a razão mais provável. Consulte Limitações.

Logs do Postgres

Mensagens de log brutas do Postgres, incluindo o erro específico por trás de uma falha.

logs_do_postgres

Coluna	Tipo	Descrição
sample_seq	Long	Posição ordinal desta linha dentro de seu lote.
elevel	Long	Codificação de nível de log interno.
severity	String	A gravidade do log, por exemplo ERROR ou LOG.
sqlstate	String	O código de erro SQLSTATE do Postgres, por exemplo 42703 para uma coluna indefinida.
backend_pid / leader_backend_pid	Long	O ID do processo de backend e o PID do seu líder de query paralela, se aplicável.
userid / usename	LONG / STRING	O ID e o nome do objeto da função de conexão.
datid / datname	LONG / STRING	O ID e o nome do objeto do banco de dados.
application_name / client_addr	String	O nome do aplicativo de conexão e o endereço do cliente.
schema_name / table_name / column_name / constraint_name / datatype_name	String	O esquema, tabela, coluna, restrição ou tipo de dados referenciado pelo erro, quando o Postgres tem um.
funcname	String	A função em que o erro ocorreu, se aplicável.
filename / lineno	STRING/LONG	O arquivo de origem do Postgres e a linha de onde o erro se originou.
message	String	O texto da mensagem de log.
detail / hint / context	String	Detalhes adicionais, uma correção sugerida e o contexto do erro, quando o Postgres os tiver.
internalquery	String	Uma query gerada internamente relacionada ao erro, se aplicável.
statement	String	O comando que Trigger esta entrada de Logs. Mascarado. Consulte Texto da instrução mascarada.
truncated_mask	Long	Indica quais campos, se houver, foram truncados antes de serem gravados.

Coluna	Tipo	Descrição
sample_seq	Long	Posição ordinal desta linha dentro de seu lote.
elevel	Long	Codificação de nível de log interno.
severity	String	A gravidade do log, por exemplo ERROR ou LOG.
sqlstate	String	O código de erro SQLSTATE do Postgres, por exemplo 42703 para uma coluna indefinida.
backend_pid / leader_backend_pid	Long	O ID do processo de backend e o PID do seu líder de query paralela, se aplicável.
userid / usename	LONG / STRING	O ID e o nome do objeto da função de conexão.
datid / datname	LONG / STRING	O ID e o nome do objeto do banco de dados.
application_name / client_addr	String	O nome do aplicativo de conexão e o endereço do cliente.
schema_name / table_name / column_name / constraint_name / datatype_name	String	O esquema, tabela, coluna, restrição ou tipo de dados referenciado pelo erro, quando o Postgres tem um.
funcname	String	A função em que o erro ocorreu, se aplicável.
filename / lineno	STRING/LONG	O arquivo de origem do Postgres e a linha de onde o erro se originou.
message	String	O texto da mensagem de log.
detail / hint / context	String	Detalhes adicionais, uma correção sugerida e o contexto do erro, quando o Postgres os tiver.
internalquery	String	Uma query gerada internamente relacionada ao erro, se aplicável.
statement	String	O comando que Trigger esta entrada de Logs. Mascarado. Consulte Texto da instrução mascarada.
truncated_mask	Long	Indica quais campos, se houver, foram truncados antes de serem gravados.

nota

Os campos estruturados schema_name, table_name e column_name não são preenchidos para cada tipo de erro. Um erro de análise simples de "coluna não existe" (SQLSTATE 42703), por exemplo, os deixa vazios, mesmo que message nomeie a coluna diretamente. Não confie que esses campos sejam preenchidos. Verifique message primeiro.

Métricas de compute

Uso de recurso em nível de compute: CPU, memória, disco e E/S de rede, e o cache de arquivo local (LFC), o cache do Lakebase do lado do compute na frente do pageserver.

compute_counters

Coluna	Tipo	Descrição
backpressure_throttling_seconds	double	Tempo que a camada de armazenamento levou para limitar as gravações neste intervalo. Um valor diferente de zero significa que o volume de gravação ultrapassou a capacidade de absorção do armazenamento.
host_busiest_cpu_seconds / host_cpu_seconds	double	Tempo de CPU consumido, para o núcleo mais ocupado e no total.
host_disk_read_bytes / host_disk_written_bytes	double	Volume de E/S de disco.
host_network_receive_bytes / host_network_transmit_bytes	double	Volume de E/S de rede.
lfc_evictions / lfc_hits / lfc_misses / lfc_writes	Long	Atividade do cache de arquivo local para este intervalo.
replica_lfc_redo_evictions	Long	Evicções de cache de arquivo local causadas pela repetição de réplica, se este compute for uma réplica de leitura.

Coluna	Tipo	Descrição
backpressure_throttling_seconds	double	Tempo que a camada de armazenamento levou para limitar as gravações neste intervalo. Um valor diferente de zero significa que o volume de gravação ultrapassou a capacidade de absorção do armazenamento.
host_busiest_cpu_seconds / host_cpu_seconds	double	Tempo de CPU consumido, para o núcleo mais ocupado e no total.
host_disk_read_bytes / host_disk_written_bytes	double	Volume de E/S de disco.
host_network_receive_bytes / host_network_transmit_bytes	double	Volume de E/S de rede.
lfc_evictions / lfc_hits / lfc_misses / lfc_writes	Long	Atividade do cache de arquivo local para este intervalo.
replica_lfc_redo_evictions	Long	Evicções de cache de arquivo local causadas pela repetição de réplica, se este compute for uma réplica de leitura.

compute_gauges

Coluna	Tipo	Descrição
current_lsn	Long	A posição atual do log write-ahead.
replica_wal_replay_lsn / replica_wal_receive_lsn	Long	Replay de WAL e posições de recebimento, se este compute for uma réplica de leitura.
max_connections	Long	O limite de conexão configurado.
lfc_working_set_size_5m / lfc_working_set_size_15m / lfc_working_set_size_60m	Long	Tamanho estimado do conjunto de trabalho nos últimos 5, 15 e 60 minutos.
lfc_size_limit / lfc_allocated / lfc_used	Long	Capacidade e uso atual do cache de arquivo local.
total_size_limit / total_size	Long	Capacidade geral de armazenamento e uso atual.
replication_lag_bytes / replication_lag_time_ms	long / double	Atraso de replicação, se este compute for uma réplica de leitura.
host_logical_cpus / host_memory_total_bytes	double	A CPU e a memória provisionadas do compute.

Coluna	Tipo	Descrição
current_lsn	Long	A posição atual do log write-ahead.
replica_wal_replay_lsn / replica_wal_receive_lsn	Long	Replay de WAL e posições de recebimento, se este compute for uma réplica de leitura.
max_connections	Long	O limite de conexão configurado.
lfc_working_set_size_5m / lfc_working_set_size_15m / lfc_working_set_size_60m	Long	Tamanho estimado do conjunto de trabalho nos últimos 5, 15 e 60 minutos.
lfc_size_limit / lfc_allocated / lfc_used	Long	Capacidade e uso atual do cache de arquivo local.
total_size_limit / total_size	Long	Capacidade geral de armazenamento e uso atual.
replication_lag_bytes / replication_lag_time_ms	long / double	Atraso de replicação, se este compute for uma réplica de leitura.
host_logical_cpus / host_memory_total_bytes	double	A CPU e a memória provisionadas do compute.

Métricas de banco de dados

Atividade por banco de dados: linhas alteradas, transações, sessões e integridade do vacuum. É aqui que residem o inchaço da tabela e os sinais de autovacuum.

database_counters

Coluna	Tipo	Descrição
datid / datname	LONG / STRING	O ID e o nome do objeto do banco de dados.
active_time_ms / idle_in_transaction_time_ms / session_time_ms	double	Tempo gasto ativo, parado em uma transação aberta, e conectado em geral.
deadlocks	Long	Número de impasses detectados.
rows_deleted / rows_fetched / rows_inserted / rows_returned / rows_updated	Long	Atividade em nível de linha para o intervalo.
sessions_abandoned / sessions_established / sessions_fatal / sessions_killed	Long	Contagens do ciclo de vida da sessão.
shared_blks_hit / shared_blks_read	Long	Atividade de cache de buffer compartilhada.
xact_commit / xact_rollback	Long	Transações confirmadas e revertidas.

Coluna	Tipo	Descrição
datid / datname	LONG / STRING	O ID e o nome do objeto do banco de dados.
active_time_ms / idle_in_transaction_time_ms / session_time_ms	double	Tempo gasto ativo, parado em uma transação aberta, e conectado em geral.
deadlocks	Long	Número de impasses detectados.
rows_deleted / rows_fetched / rows_inserted / rows_returned / rows_updated	Long	Atividade em nível de linha para o intervalo.
sessions_abandoned / sessions_established / sessions_fatal / sessions_killed	Long	Contagens do ciclo de vida da sessão.
shared_blks_hit / shared_blks_read	Long	Atividade de cache de buffer compartilhada.
xact_commit / xact_rollback	Long	Transações confirmadas e revertidas.

database_gauges

Coluna	Tipo	Descrição
datid / datname	LONG / STRING	O ID e o nome do objeto do banco de dados.
numbackends	Long	Número atual de conexões para esta base de dados.
size	Long	O tamanho da base de dados em disco.
oldest_frozen_xid_age / oldest_mxid_age	Long	ID da transação e idade do ID de multixact da linha mais antiga não congelada. Valores crescentes são o primeiro sinal de atraso do vacuum, muito antes que o inchaço se torne visível no tamanho da tabela.

Coluna	Tipo	Descrição
datid / datname	LONG / STRING	O ID e o nome do objeto do banco de dados.
numbackends	Long	Número atual de conexões para esta base de dados.
size	Long	O tamanho da base de dados em disco.
oldest_frozen_xid_age / oldest_mxid_age	Long	ID da transação e idade do ID de multixact da linha mais antiga não congelada. Valores crescentes são o primeiro sinal de atraso do vacuum, muito antes que o inchaço se torne visível no tamanho da tabela.

Limitações

nota

As senhas são mascaradas quando um comando é capturado, portanto, um CREATE ROLE capturado aparece como PASSWORD '***'. A ocultação depende da detecção da senha no comando, e um comando malformado pode escapar da detecção.

O Databricks recomenda funções do OAuth, que autenticam identidades do Databricks com tokens e não deixam nenhuma senha para digitar.

Aplicam-se as seguintes limitações:

• COPY as operações não são capturadas no histórico do plano de query.

• Uma query executada dentro de uma função ou procedimento PL/pgSQL não é capturada na telemetria de nível de query, a menos que também seja executada como uma instrução de nível superior. O acompanhamento de instruções do próprio Postgres conta apenas instruções de nível superior por default.

• Branches e endpoints aparecem na telemetria e nas percepções pelo ID interno (por exemplo, br-odd-mud-y2icrn1h), e não por um nome de exibição como "production". Cross-reference the ID in the Lakebase UI if you must confirm which branch or endpoint an insight or table row refers to.

• Os GUCs que habilitam a captura de telemetria podem não se propagar automaticamente para um compute existente. Se a telemetria não aparecer após a ativação da pré-visualização, conecte-se ao projeto e verifique:

  SQL

  SHOW neon_monitor.log_capture_enabled;
  SHOW databricks.o11y_exporter_enabled;

  Ambos devem retornar on. Se qualquer um deles retornar off, reinicie o endpoint de compute.

Legacy observability configurations

Antes de a telemetria ser movida para as tabelas do sistema, você podia criar uma configuração de observabilidade que capturava a telemetria em um catálogo e em um esquema no seu próprio Unity Catalog e fornecia painéis pré-criados. As configurações existentes continuam funcionando e seus painéis permanecem disponíveis. Não é mais possível criar novas configurações de observabilidade, e a captura para tabelas do sistema não cria painéis.

Próximos passos

• Detect issues with percepções : o agente que analisa essa telemetria de acordo com uma programação.
• Investigate and fix issues with Genie : faça perguntas sobre esta telemetria com suas próprias palavras.
• Lakebase system table reference : onde essas tabelas se encontram entre as outras tabelas do sistema.