Statistiche sulle letture

Spanner fornisce tabelle integrate che memorizzano le statistiche sulle letture. Puoi recupera le statistiche da queste tabelle SPANNER_SYS.READ_STATS* con SQL istruzioni.

Quando utilizzare le statistiche di lettura

Le statistiche di lettura forniscono informazioni su come un'applicazione utilizza il database e sono utili per esaminare i problemi di prestazioni. Ad esempio, puoi controllare quali forme di lettura sono in esecuzione su un database, con quale frequenza eseguire e spiegare le caratteristiche prestazionali di queste forme di lettura. Puoi utilizzare le statistiche di lettura per il tuo database per identificare le forme di lettura che comportano un elevato utilizzo della CPU. A livello generale, le statistiche di lettura ti consentono di capire il comportamento del traffico che va in un database in termini di utilizzo delle risorse.

Limitazioni

• Questo strumento è ideale per analizzare stream di letture simili che rappresentano gran parte dell'utilizzo della CPU. Non è adatto per la ricerca di letture eseguite solo una volta.

• L'utilizzo della CPU monitorato in queste statistiche rappresenta Spanner utilizzo della CPU lato server, escluso l'utilizzo della CPU di precaricamento e altri overhead.

• Le statistiche vengono raccolte secondo il criterio del "best effort". Di conseguenza, è possibile che alcune statistiche non vengano registrate se si verificano problemi con i sistemi di base. Ad esempio, se ci sono problemi di rete interni, è possibile per non perdere alcune statistiche.

Disponibilità

I dati di SPANNER_SYS sono disponibili solo tramite le interfacce SQL. Ad esempio:

• Pagina Spanner Studio di un database nella console Google Cloud

• Il comando gcloud spanner databases execute-sql

• L'API executeQuery

Gli altri metodi di lettura singoli forniti da Spanner non supportano SPANNER_SYS.

Utilizzo della CPU raggruppato per forma di lettura

Le seguenti tabelle tengono traccia delle forme di lettura con il maggiore utilizzo di CPU durante un specifico per un periodo di tempo:

• SPANNER_SYS.READ_STATS_TOP_MINUTE: leggi le statistiche sulle forme aggregate in intervalli di 1 minuto.
• SPANNER_SYS.READ_STATS_TOP_10MINUTE: consente di leggere le statistiche relative alla forma aggregate su Intervalli di 10 minuti.
• SPANNER_SYS.READ_STATS_TOP_HOUR: leggi le statistiche sulle forme aggregate in intervalli di 1 ora.

Queste tabelle hanno le seguenti proprietà:

• Ogni tabella contiene dati per intervalli di tempo non sovrapposti della durata del nome di una tabella specifica.

• Gli intervalli sono basati sugli orari dell'orologio. Gli intervalli di 1 minuto terminano al minuto, gli intervalli di 10 minuti terminano ogni 10 minuti a partire dall'ora e gli intervalli di 1 ora terminano all'ora. Dopo ogni intervallo, Spanner raccoglie i dati da tutti e poi rende disponibili i dati nelle tabelle SPANNER_SYS entro breve in seguito.

  Ad esempio, alle 11:59:30, gli intervalli più recenti disponibili per SQL le query sono:

  • 1 minuto: dalle 00:58:00 alle 00:58:59
  • 10 minuti: 11:40:00-11:49:59
  • 1 ora: dalle 10:00:00 alle 10:59:59 AM

• Spanner raggruppa le statistiche per forma di lettura. Se è presente un tag, FPRINT è l'hash del tag. In caso contrario, è l'hash del valore READ_COLUMNS.

• Ogni riga contiene statistiche per tutte le esecuzioni di una particolare forma di lettura per cui Spanner acquisisce le statistiche durante l'intervallo specificato.

• Se Spanner non è in grado di memorizzare le informazioni su ogni forma di lettura distinta eseguita durante l'intervallo, il sistema dà la priorità alle forme di lettura con l'utilizzo della CPU più elevato durante l'intervallo specificato.

Schema tabella

Esempi di query

Questa sezione include diverse istruzioni SQL di esempio che recuperano le istruzioni statistiche. Puoi eseguire queste istruzioni SQL utilizzando librerie client, gcloud spanner, o il Console Google Cloud.

Elenca le statistiche di base per ogni forma di lettura in un determinato periodo di tempo

La seguente query restituisce i dati non elaborati per le forme di lettura più importanti nella a intervalli di tempo recenti di 1 minuto.

SELECT fprint,
       read_columns,
       execution_count,
       avg_cpu_seconds,
       avg_rows,
       avg_bytes,
       avg_locking_delay_seconds,
       avg_client_wait_seconds
FROM spanner_sys.read_stats_top_minute
ORDER BY interval_end DESC LIMIT 3;

Output della query

Elenca le forme di lettura, ordinate in base all'utilizzo totale massimo della CPU

La seguente query restituisce le forme di lettura con il maggiore utilizzo della CPU nell'ora più recente:

SELECT read_columns,
       execution_count,
       avg_cpu_seconds,
       execution_count * avg_cpu_seconds AS total_cpu
FROM spanner_sys.read_stats_top_hour
WHERE interval_end =
  (SELECT MAX(interval_end)
   FROM spanner_sys.read_stats_top_hour)
ORDER BY total_cpu DESC LIMIT 3;

Output della query

Statistiche aggregate

SPANNER_SYS contiene anche tabelle per archiviare le statistiche di lettura aggregate acquisite da Spanner in un periodo di tempo specifico:

• SPANNER_SYS.READ_STATS_TOTAL_MINUTE: statistiche aggregate per tutte le forme di lettura durante intervalli di 1 minuto.
• SPANNER_SYS.READ_STATS_TOTAL_10MINUTE: statistiche aggregate per tutte le forme di lettura durante intervalli di 10 minuti.
• SPANNER_SYS.READ_STATS_TOTAL_HOUR: statistiche aggregate per tutte le forme di lettura a intervalli di 1 ora.

Le tabelle delle statistiche aggregate hanno le seguenti proprietà:

• Ogni tabella contiene dati per intervalli di tempo non sovrapposti della durata del nome di una tabella specifica.

• Gli intervalli sono basati sugli orari dell'orologio. Gli intervalli di 1 minuto terminano al minuto, quelli di 10 minuti terminano ogni 10 minuti a partire dall'ora e quelli di 1 ora terminano all'ora.

  Ad esempio, alle 11:59:30, gli intervalli più recenti disponibili per SQL le query sulle statistiche di lettura aggregate sono:

  • 1 minuto: dalle 00:58:00 alle 00:58:59
  • 10 minuti: 11:40:00-11:49:59
  • 1 ora: 10:00:00–10:59:59

• Ogni riga contiene statistiche per tutte le forme di lettura eseguite sul durante l'intervallo specificato, aggregati. Esiste una sola riga per intervallo di tempo.

• Le statistiche acquisite nelle tabelle SPANNER_SYS.READ_STATS_TOTAL_* potrebbero includere forme di lettura che Spanner non ha acquisito nelle tabelle SPANNER_SYS.READ_STATS_TOP_*.

• Alcune colonne di queste tabelle sono esposte come metriche in Cloud Monitoring. Le metriche esposte sono:

  • Conteggio delle righe restituito
  • Conteggio letture
  • Tempo di CPU di lettura
  • Ritardi di blocco
  • Tempo di attesa del cliente
  • Ritardo nell'aggiornamento del leader
  • Conteggio byte restituiti

  Per ulteriori informazioni, consulta Metriche di Spanner.

Schema tabella

Esempi di query

Questa sezione include diversi esempi di istruzioni SQL che recuperano le statistiche di lettura aggregate. Puoi eseguire queste istruzioni SQL utilizzando le librerie client, gcloud spanner o la console Google Cloud.

Trovare l'utilizzo totale della CPU in tutti i shape di lettura

La seguente query restituisce il numero di ore CPU consumate dalle forme di lettura in nell'ora più recente:

SELECT (avg_cpu_seconds * execution_count / 60 / 60)
  AS total_cpu_hours
FROM spanner_sys.read_stats_total_hour
WHERE interval_end =
  (SELECT MAX(interval_end)
   FROM spanner_sys.read_stats_total_hour);

Output query

Trovare il conteggio totale delle esecuzioni in un determinato periodo di tempo

La seguente query restituisce il numero totale di forme di lettura eseguite nelle intervallo completo recente di 1 minuto:

SELECT interval_end,
       execution_count
FROM spanner_sys.read_stats_total_minute
WHERE interval_end =
  (SELECT MAX(interval_end)
   FROM spanner_sys.read_stats_total_minute);

Output query

Conservazione dei dati

Come minimo, Spanner conserva i dati di ogni tabella per i seguenti periodi di tempo:

• SPANNER_SYS.READ_STATS_TOP_MINUTE e SPANNER_SYS.READ_STATS_TOTAL_MINUTE: intervalli che coprono le 6 ore precedenti.

• SPANNER_SYS.READ_STATS_TOP_10MINUTE e SPANNER_SYS.READ_STATS_TOTAL_10MINUTE: intervalli che coprono i 4 giorni precedenti.

• SPANNER_SYS.READ_STATS_TOP_HOUR e SPANNER_SYS.READ_STATS_TOTAL_HOUR: intervalli che coprono i 30 giorni precedenti.

Risolvere i problemi di utilizzo elevato della CPU con le statistiche di lettura

Le statistiche di lettura di Spanner sono utili nei casi in cui è necessario esaminare un utilizzo elevato della CPU nel database Spanner o quando si sta semplicemente cercando di comprendere le forme di lettura che richiedono molta CPU nel database. L'ispezione delle forme di lettura che utilizzano quantità significative di risorse di database offre agli utenti di Spanner un potenziale modo per ridurre i costi operativi e possibilmente migliorare le latenze generali del sistema. Segui questi passaggi per scoprire come per utilizzare le statistiche di lettura per esaminare l'utilizzo elevato della CPU nel database.

Seleziona un periodo di tempo da esaminare

Inizia la tua indagine cercando il momento in cui l'applicazione ha iniziato di utilizzare CPU elevato. Ad esempio, nel seguente scenario, il problema è iniziato intorno alle 17:20 del 28 maggio 2020.

Raccogliere le statistiche di lettura per il periodo di tempo selezionato

Dopo aver selezionato un periodo di tempo per iniziare la nostra indagine, esamineremo le statistiche raccolte nella tabella READ_STATS_TOTAL_10MINUTE in quel periodo. I risultati di questa query potrebbero fornirci indizi su come la CPU e altre statistiche di lettura sono cambiate in quel periodo di tempo. La seguente query restituisce statistiche di lettura aggregate dal giorno 4:30 pm al giorno 7:30 pm (incluso).

SELECT
  interval_end,
  ROUND(avg_cpu_seconds,4) as avg_cpu_seconds,
  execution_count,
  avg_locking_delay_seconds
FROM SPANNER_SYS.READ_STATS_TOTAL_10MINUTE
WHERE
  interval_end >= "2020-05-28T16:30:00"
  AND interval_end <= "2020-05-28T19:30:00"
ORDER BY interval_end;

I seguenti dati sono un esempio del risultato restituito dalla nostra query.

Qui vediamo che il tempo di CPU medio, avg_cpu_seconds, è più elevato negli intervalli evidenziati. Il valore interval_end con valore 2020-05-28 19:20:00 ha un tempo CPU più elevato, quindi sceglieremo questo intervallo per approfondire nel passaggio successivo.

Trovare le forme di lettura che causano un elevato utilizzo della CPU

Approfondendo l'argomento, ora eseguiamo una query sulla tabella READ_STATS_TOP_10MINUTE l'intervallo scelto nel passaggio precedente. I risultati di questa query possono indicare quali forme di lettura causano un utilizzo elevato della CPU.

SELECT
  read_columns,
  ROUND(avg_cpu_seconds,4) as avg_cpu_seconds,
  execution_count,
  avg_rows
FROM SPANNER_SYS.READ_STATS_TOP_10MINUTE
WHERE
  interval_end = "2020-05-28T19:20:00"
ORDER BY avg_cpu_seconds DESC LIMIT 3;

I seguenti dati sono un esempio del risultato che otteniamo dalla query: che restituisce informazioni sulle tre principali forme di lettura classificate per avg_cpu_seconds. Nota l'utilizzo di ROUND nella nostra query per limitare l'output di avg_cpu_seconds con quattro cifre decimali.

¹ _exists è un campo interno utilizzato per verificare se una determinata riga esiste o meno.

Uno dei motivi di un elevato utilizzo della CPU potrebbe essere l'avvio di alcune operazioni di lettura forme più spesso (execution_count). Forse il numero medio di righe che la lettura restituita è aumentata (avg_rows). Se nessuna di queste proprietà della forma di lettura rivelano nulla di interessante, puoi esaminare altre proprietà come avg_locking_delay_seconds, avg_client_wait_seconds o avg_bytes.

Applica le best practice per ridurre l'utilizzo elevato della CPU

Dopo aver completato i passaggi precedenti, valuta se l'applicazione di una di queste best practice può aiutarti a risolvere il problema.

• Il numero di volte in cui Spanner ha eseguito le forme di lettura durante l'intervallo è un buon esempio di metrica che necessita di una base di riferimento per capire se una misurazione sia ragionevole o segno di un problema. Avendo stabilito una base di riferimento per sarai in grado di rilevare e analizzare la causa di eventuali eventi imprevisti deviazioni dal comportamento normale.

• Se l'utilizzo della CPU è relativamente costante per la maggior parte del tempo, ma improvvisamente mostra una di picco che può essere correlato a un simile picco improvviso nelle richieste degli utenti comportamento dell'applicazione, potrebbe significare che tutto funziona previsto.

• Prova la seguente query per trovare le forme di lettura principali classificate in base al numero di volte Spanner ha eseguito per ogni forma di lettura:

  SELECT interval_end, read_columns, execution_count
  FROM SPANNER_SYS.READ_STATS_TOP_MINUTE
  ORDER BY execution_count DESC
  LIMIT 10;
  

• Se cerchi le latenze di lettura più basse possibili, in particolare quando utilizzi configurazioni di istanze multiregione, utilizza le letture non aggiornate anziché le letture sicure per ridurre o rimuovere il componente AVG_LEADER_REFRESH_DELAY_SECONDS della latenza di lettura.

• Se esegui solo operazioni di lettura ed è possibile esprimere la lettura utilizzando un singolo di lettura, dovresti utilizzare quel singolo metodo di lettura. Singola le letture non si bloccano, a differenza delle transazioni di lettura/scrittura, pertanto dovresti usare transazioni di sola lettura rispetto a transazioni di lettura/scrittura più costose quando senza scrivere dati.

Passaggi successivi

• Scopri altri strumenti di introspezione.
• Scopri altre informazioni archiviate da Spanner per ogni database nelle tabelle dello schema delle informazioni del database.
• Scopri di più sulle best practice per SQL per Spanner.
• Scopri di più sull'analisi di una CPU elevata all'utilizzo delle risorse.