Monitorare visivamente Azure Data Factory

APPLICABILE A: Azure Data Factory Azure Synapse Analytics

Dopo aver creato e pubblicato una pipeline in Azure Data Factory, è possibile associarla a un trigger o avviare manualmente un'esecuzione ad hoc. È possibile monitorare tutte le esecuzioni della pipeline in modo nativo nell'esperienza utente Azure Data Factory. Per aprire l'esperienza di monitoraggio, selezionare il riquadro Monitor & Manage nel pannello di data factory del portale di Azure. Se si è già all'interno dell'UX di ADF, fare clic sull'icona Monitor sulla barra laterale sinistra.

Per impostazione predefinita, tutte le esecuzioni della data factory vengono visualizzate nel fuso orario locale del browser. Se si modifica il fuso orario, tutti i campi di data/ora vengono impostati sul fuso selezionato.

Monitorare le esecuzioni delle pipeline

La visualizzazione di monitoraggio predefinita è l'elenco delle esecuzioni delle pipeline attivate nel periodo di tempo selezionato. È possibile modificare l'intervallo di tempo e filtrare in base a stato, nome della pipeline o annotazione. Posizionare il puntatore del mouse sull'esecuzione della pipeline specifica per ottenere azioni specifiche dell'esecuzione, ad esempio la riesecuzione e il report sull'utilizzo.

La griglia delle esecuzioni delle pipeline include le colonne seguenti:

Per aggiornare l'elenco delle esecuzioni di pipeline e attività, è necessario selezionare manualmente il pulsante Aggiorna. L'aggiornamento automatico non è attualmente supportato.

Per visualizzare i risultati dell'esecuzione di un debug, selezionare la scheda Debug.

Monitorare le esecuzioni delle attività

Per ottenere una visualizzazione dettagliata delle singole esecuzioni attività di un'esecuzione della pipeline specifica, fare clic sul nome della pipeline.

La visualizzazione elenco illustra le esecuzioni attività corrispondenti a ogni esecuzione della pipeline. Posizionare il puntatore del mouse sull'esecuzione attività per ottenere informazioni specifiche dell'esecuzione, ad esempio l'input JSON, l'output JSON e le esperienze di monitoraggio dettagliate specifiche dell'attività.

Se un'attività non è riuscita, è possibile visualizzare il messaggio di errore dettagliato facendo clic sull'icona nella colonna degli errori.

Alzare di livello le proprietà utente per il monitoraggio

Alzare di livello qualsiasi proprietà dell'attività della pipeline e impostarla come proprietà utente in modo che diventi un'entità che è possibile monitorare. Ad esempio, è possibile alzare di livello le proprietà Origine e Destinazione dell'attività di copia nella pipeline impostandole come proprietà utente.

Dopo aver creato le proprietà utente, è possibile monitorarle successivamente nelle visualizzazioni delle liste di monitoraggio.

Se l'origine per l'attività di copia è il nome di una tabella, è possibile monitorare il nome della tabella di origine come colonna nella visualizzazione elenco delle esecuzioni delle attività.

Eseguire di nuovo le pipeline e le attività

Il comportamento di riesecuzione delle attività del container è il seguente:

• Wait- L'attività si comporterà come in precedenza.
• Set Variable - L'attività si comporterà come in precedenza.
• Filter - L'attività si comporterà come in precedenza.
• Until L'attività valuterà l'espressione e si ripeterà fino a quando la condizione viene soddisfatta. Le attività interne potrebbero comunque essere ignorate in base alle regole di ripetizione delle esecuzioni.
• Foreach L'attività verrà riprodotta a ciclo continuo sugli elementi che riceve. Le attività interne potrebbero comunque essere ignorate in base alle regole di ripetizione delle esecuzioni.
• If and switch - Le condizioni verranno sempre valutate. Tutte le attività interne verranno valutate. Le attività interne possono ancora essere ignorate in accordo con le regole di riesecuzione, ma attività come Execute Pipeline verranno eseguite nuovamente.
• Execute pipeline activity: la pipeline figlio verrà attivata, ma tutte le attività contenute in essa potrebbero comunque essere ignorate in base alle regole di ripetizione delle esecuzioni.

Per rieseguire dall'inizio una pipeline eseguita in precedenza, passare il mouse sopra l'esecuzione della pipeline specifica e selezionare Riesegui. Se si selezionano più pipeline, è possibile usare il pulsante Riesegui per eseguirle tutte.

Se si desidera rieseguire una pipeline a partire da un punto specifico, è possibile farlo dalla visualizzazione delle esecuzioni attività. Selezionare l'attività da cui si desidera iniziare e selezionare Ripeti esecuzione da un'attività.

È anche possibile rieseguire una pipeline e modificare i parametri. Selezionare il pulsante Nuovi parametri per modificare i parametri.

Rieseguire dall'attività fallita

Se un'attività non riesce, raggiunge il time-out o viene annullata, è possibile eseguire nuovamente la pipeline da tale attività selezionando Esegui di nuovo nell'attività non riuscita.

Visualizzare la cronologia di riesecuzione

È possibile visualizzare la cronologia di riesecuzione per tutte le esecuzioni di pipeline nella visualizzazione elenco.

È anche possibile visualizzare la cronologia di riesecuzione per una specifica esecuzione della pipeline.

Monitorare l'utilizzo

Per visualizzare le risorse utilizzate da un'esecuzione della pipeline, fare clic sull'icona del consumo accanto all'esecuzione.

Facendo clic sull'icona viene visualizzato un report sul consumo delle risorse usate dall'esecuzione della pipeline.

È possibile collegare questi valori al calcolatore prezzi Azure per stimare il costo dell'esecuzione della pipeline. Per altre informazioni sui prezzi Azure Data Factory, vedere Informazioni sui prezzi.

Visualizzazioni Gantt

Un diagramma di Gantt è una visualizzazione che consente di osservare la cronologia di esecuzione in un intervallo di tempo. Passando a una visualizzazione Gantt, è possibile visualizzare tutte le esecuzioni delle pipeline raggruppate per nome e mostrate come barre in base al tempo impiegato dall'esecuzione. È anche possibile raggruppare per annotazioni/tag che hai creato sulla tua pipeline. La visualizzazione Gantt è disponibile anche a livello dell'esecuzione delle attività.

La lunghezza della barra indica la durata della pipeline. È anche possibile selezionare la barra per visualizzare altri dettagli.

Avvisi

È possibile generare avvisi sulle metriche supportate in Data Factory. Per iniziare, selezionare Monitor>Alerts & metrics (Monitoraggio > Avvisi e metriche) nella pagina di monitoraggio di Data Factory.

Per un'introduzione di sette minuti e una dimostrazione di questa funzionalità, guardare il video seguente:

Creare avvisi

1. Selezionare Nuova regola di avviso per creare un nuovo avviso.

   

2. Specificare il nome della regola e selezionare la gravità dell'avviso.

   

3. Selezionare i criteri di avviso.

   

   

   Screenshot dell'elenco dei criteri.

   È possibile creare avvisi su varie metriche, tra cui quelle per il conteggio/dimensioni delle entità di Azure Data Factory, le esecuzioni di attività/pipeline/trigger, l'utilizzo della CPU Integration Runtime/memoria/numero di nodi/coda, nonché per le esecuzioni di pacchetti SSIS e le operazioni di avvio/arresto del runtime di integrazione SSIS.

4. Configurare la logica degli avvisi. È possibile creare un avviso per la metrica selezionata per tutte le pipeline e attività corrispondenti. È anche possibile selezionare un tipo di attività, un nome di attività, un nome di pipeline o un tipo di errore specifico.

   

5. Configurare notifiche tramite posta elettronica, SMS, push, voce per l'avviso. Creare un gruppo di azioni o sceglierne uno esistente per le notifiche di avviso.

   

   

6. Creare la regola di avviso.

   

Contenuto correlato

Per informazioni sul monitoraggio e sulla gestione delle pipeline, vedere l'articolo su come monitorare e gestire pipeline a livello di codice.