$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
Questa sezione descrive l'intera pipeline di deep learning con vincoli fisici per la valutazione delle condizioni termiche utilizzando immagini termografiche a infrarossi. Il quadro integra (i) estrazione del campo per temperatura, (ii) regressione CNN di base, (iii) regolarizzazione fisica basata sulla diffusione, (iv) apprendimento adattivo dei parametri e (v) quantificazione dell'incertezza. Tutti gli strumenti utilizzati in questo studio sono descritti nella Tabella dei Materiali.
Acquisizione dell'immagine termica e costruzione del campo termico
Immagini infrarosse (IR) di apparecchiature ad alta tensione venivano acquisite utilizzando una fotocamera termografica calibrata. Ogni immagine veniva convertita in una matrice di temperatura spaziale T(x, y) ∈ RH×W mappando le intensità dei pixel ai valori fisici della temperatura (°C) utilizzando parametri di calibrazione radiometrica della fotocamera. La Figura 1A–C mostra la visualizzazione della temperatura. L'immagine IR originale viene convertita in una mappa di temperatura fisicamente significativa. L'istogramma mostra una distribuzione di temperatura distorta con una concentrazione compresa tra 50 e 90 °C. Le zone localizzate ad alta temperatura (hotspot) sono chiaramente visibili. La Figura 2 mostra una rappresentazione 3D dell'elevazione termica della superficie del campo di temperatura. Il grafico 3D dell'elevazione della superficie rivela pendenze ripide intorno alle regioni calde. I picchi di temperatura si avvicinano ai ~120 °C. Il campo termico è spazialmente liscio, eccetto quasi per conduttori e giunti di collegamento quasi energici. Queste caratteristiche giustificano l'uso di un termine di regolarizzazione basato sulla diffusione per imporre la fluidità fisica preservando al contempo fenomeni localizzati ad alto gradiente.

Figura 1: Visualizzazione della temperatura. (A) Immagine termografica originale a infrarossi (IR) dell'apparecchiatura ad alta tensione ispezionata che mostra il modello termico osservato. (B) Mappa delle temperature estratta dall'immagine termografica, che illustra la distribuzione spaziale delle temperature superficiali e dei gradienti termici associati. (C) Istogramma della distribuzione della temperatura che mostra la distribuzione di frequenza dei valori di temperatura all'interno del campo di temperatura estratto. Questa figura dimostra la conversione di un'immagine termografica in una rappresentazione quantitativa della temperatura e riassume la distribuzione di temperatura sottostante utilizzata per lo sviluppo e l'analisi del modello successivo. Abbreviazioni; IR = infrarosso. Clicca qui per visualizzare una versione più grande di questa figura.

Figura 2: Rappresentazione 3D dell'elevazione termica della superficie del campo di temperatura. Visualizzazione tridimensionale della distribuzione delle temperature, dove l'elevazione della superficie corrisponde alla magnitudine della temperatura e mette in evidenza i punti caldi termici localizzati. Clicca qui per visualizzare una versione più grande di questa figura.
Formulazione del problema
Sia

denotano l'immagine termografica infrarossa RGB, dove H e W rappresentano le dimensioni spaziali e C = 3 corrisponde ai canali di colore associati alla tavolozza termica arcobaleno. Sebbene l'immagine a infrarossi rappresenti visivamente informazioni termiche, non è una matrice numerica diretta della temperatura perché i colori visualizzati dipendono da mappatura della palette, scala, interpolazione e condizioni di imaging.
Sia

indicare il corrispondente campo di temperatura di realtà-terra ottenuto tramite calibrazione radiometrica ed estrazione della temperatura dal sistema di imaging a infrarossi.
L'obiettivo di apprendimento è approssimare la mappatura

dove θ indica i parametri addestrabili della CNN e T̂ rappresenta il campo di temperatura previsto. Lo scopo di questa mappatura supervisionata non è semplicemente riprodurre la conversione radiometrica diretta, ma apprendere un modello di regressione della temperatura spazialmente coerente da immagini termografiche renderizzate. A differenza dell'estrazione diretta colore a temperatura pixel per pixel, la CNN può sfruttare la struttura termica contestuale tra le regioni vicine, ridurre la sensibilità al rumore, preservare le caratteristiche dei punti caldi e generare campi di temperatura fisicamente plausibili più lisci sotto i vincoli di diffusione imposti. La funzione obiettivo di base minimizza l'errore di regressione pixel per pixel tra i campi di temperatura previsti e calibrati:

dove Tij e T̂ij indicano rispettivamente la realità fondamentale e le temperature previste nella posizione dei pixel (i, j). Di conseguenza, il quadro dovrebbe essere interpretato come un modello di regressione termografica regolarizzato dalla fisica piuttosto che come un sostituto della calibrazione radiometrica diretta.
Condizioni di acquisizione dell'immagine a infrarossi
Le immagini termografiche a infrarossi sono state acquisite utilizzando una telecamera termica FLIR in condizioni di funzionamento esterno. Il dataset consisteva in immagini termografiche RGB con una risoluzione spaziale di 640 × 480 pixel, registrate utilizzando la tavolozza di colori arcobaleno FLIR. Ogni immagine includeva una barra termica incorporata che indicava l'intervallo di temperatura associato al fotogramma di acquisizione. L'ispezione termografica ha coperto diverse categorie di apparecchiature ad alta tensione, inclusi trasformatori, silenti, isolatori, connettori e strutture a terminali. Le immagini sono state catturate in condizioni normali di funzionamento per includere sia il comportamento termico standard sia i modelli localizzati di hotspot rilevanti per applicazioni di monitoraggio delle condizioni. L'acquisizione delle immagini è stata effettuata da punti di vista pratici di ispezione, tipicamente utilizzati nella termografia da campo. L'orientamento della telecamera e l'angolo di visuale variavano a seconda dell'accessibilità delle attrezzature e della disposizione della sottostazione. Le immagini termiche sono state schermate visivamente per garantire che l'attrezzatura bersaglio rimanesse chiaramente osservabile e che le regioni hotspot fossero distinguibili dallo sfondo. Il dataset era organizzato in cartelle etichettate in base alla categoria dell'equipaggiamento e alle condizioni termiche. Prima dello sviluppo del modello, le immagini venivano segmentate e ridimensionate in un formato spaziale coerente per l'estrazione del campo di temperatura e l'addestramento CNN. Le immagini termografiche contengono distribuzioni termiche adatte a studi di visione artificiale e deep learning che coinvolgono il rilevamento di hotspot, l'identificazione di guasti, la localizzazione di anomalie e la previsione del campo di temperatura. Nel presente lavoro, i profili termici estratti dalle immagini infrarosse sono stati utilizzati per la stima della temperatura vincolata dalla fisica e per la valutazione termica consapevole dell'incertezza.
Dataset termografico e partizionamento dei dati
Il dataset utilizzato in questo studio consisteva in 174 immagini termografiche a infrarossi acquisite da apparecchiature di sottostazione ad alta tensione utilizzando un sistema di imaging termicoFLIR 15. Il dataset includeva molteplici tipi di componenti del sistema elettrico, tra cui trasformatori, boccole, isolatori, connettori e strutture terminali ad alta tensione che operano in condizioni pratiche all'aperto. Ogni immagine termografica veniva convertita in un campo di temperatura spaziale utilizzando le informazioni radiometriche fornite dalla telecamera a infrarossi. Il dataset contiene variazioni termiche che vanno da condizioni normali di funzionamento a regioni locali di hotspot associate a uno stress termico elevato. I dati sono stati suddivisi in sottoinsiemi di addestramento, validazione e test con una suddivisione 70:15:15, ottenendo rispettivamente 121, 26 e 27 immagini. La partizionazione è stata effettuata a livello di immagine perché il dataset consisteva in scene termografiche catturate indipendentemente raccolte in condizioni operative e punti di vista variabili. È stata prestata attenzione a evitare frame quasi duplicati tra i sottoinsiemi per ridurre il rischio di fuga di dati e migliorare l'equità nella valutazione. Tutte le immagini sono state ridimensionate a una risoluzione spaziale uniforme prima dell'addestramento. La normalizzazione della temperatura è stata applicata per stabilizzare l'ottimizzazione preservando gradienti termici relativi e caratteristiche dei punti caldi importanti per la valutazione delle condizioni.
Architettura CNN di base
È stata adottata un'architettura di regressione encoder–decoder completamente convoluzionale per preservare la risoluzione spaziale durante la previsione del campo di temperatura a partire dalle immagini termografiche a infrarossi. Tutte le immagini infrarosse in ingresso venivano ridimensionate a una risoluzione uniforme di 256 × 256 × 3 prima dell'addestramento. La sezione encoder era composta da quattro blocchi convoluzionali con profondità di caratteristiche in aumento progressivo. Ogni blocco conteneva uno strato di convoluzione 3 × 3 seguito da normalizzazione batch e attivazione ReLU. Il downsampling spaziale è stato eseguito utilizzando convoluzioni strided invece del max pooling per preservare meglio le strutture termiche localizzate e le informazioni sui punti caldi. La progressione del canale encoder era:
32 → 64 → 128 → 256
La sezione decodificatrice ha ricostruito il campo di temperatura spaziale usando strati di convoluzione trasposti per l'upsampling con la progressione inversa delle caratteristiche:
256 → 128 → 64 → 32
Ogni blocco decodificatore impiegava analogamente convoluzione trasposta, normalizzazione batch e attivazione ReLU. Un ultimo strato di convoluzione 1 × 1 generava la mappa di temperatura prevista a canale singolo:
T̂ ∈ R256×256
La rete quindi emette un campo di temperatura spaziale a piena risoluzione corrispondente all'immagine di ingresso a infrarosso. Per supportare la quantificazione dell'incertezza, sono stati inseriti strati di dropout con probabilità p = 0,2 vicino agli stadi di collo di bottiglia e decodificatore. Durante l'inferenza, il dropout è rimasto attivo per consentire il campionamento Monte Carlo per la stima predittiva dell'incertezza. Tutti i pesi convoluzionali venivano inizializzati usando l'inizializzazione He-normale, mentre i termini di bias venivano inizializzati a zero. Il modello è stato addestrato utilizzando l'ottimizzatore Adam con un tasso di apprendimento iniziale di 1 × 10−3, una dimensione del lotto di 8 e un decadimento del peso di 1 × 10−5. L'addestramento è stato svolto per 100 epoche utilizzando il decadimento del tasso di apprendimento del coseno e l'arresto precoce basati sulla validazione RMSE.
La funzione obiettivo di base è definita come:

dove i dati L indicano l'errore quadratico medio pixel per pixel tra i campi di temperatura previsti e quelli di precisione fondamentale.
Le prestazioni sono state valutate utilizzando: R2, RMSE e MAE.
Sebbene la CNN di base abbia catturato con successo la struttura termica complessiva e la distribuzione dei punti caldi, occasionalmente ha prodotto artefatti non fisici in regioni a basso gradiente e un leggero sovralevigamento vicino ai confini termici netti. Queste limitazioni hanno motivato l'introduzione della regolarizzazione fisica basata sulla diffusione nella successiva formulazione del modello.
Apprendimento vincolato dalla fisica tramite diffusione
Equazione che governa il calore
Per imporre la coerenza termica nel campo di temperatura previsto, è stata incorporata una fisica preponderata basata sulla diffusione nell'equazione del calore. In condizioni quasi-stazionari, la temperatura superficiale soddisfa approssimativamente

dove T indica la temperatura, α è la diffusività termica e S rappresenta la generazione locale di calore. Poiché i campioni termografici disponibili sono singoli istantanee di ispezione piuttosto che sequenze risolte nel tempo, la derivata temporale non può essere valutata direttamente. Di conseguenza, il modello assume una conduzione quasi-stazionaria locale e impone

lontano dalle aree di riscaldamento attivo.
Il laplaciano 2D è stato discretizzato usando lo stencil standard a differenze finite:

Il residuo fisico veniva poi calcolato sulla mappa di temperatura prevista come

Per evitare ambiguità ai confini dell'immagine, il residuo laplaciano è stato valutato solo su pixel interni validi, dove sono disponibili tutti i valori vicini richiesti dallo stencil. Non è stato applicato un mascheramento esplicito alle regioni di hotspot, poiché l'obiettivo del termine fisico era regolarizzare l'intero campo spaziale piuttosto che sopprimere le zone termicamente attive. La struttura degli hotspot è quindi stata appresa attraverso il termine dati, mentre la penalità laplaciana ha incoraggiato una fluidità coerente nella diffusione lungo la mappa prevista.
La funzione obiettivo finale combinava la perdita di dati e la perdita fisica come

dove λphys controlla la forza della regolarizzazione fisica. Nello studio di ablazione, è stato esaminato λphys ∈ {0, 10−4, 10−3, 10−2, 10−1} per valutare l'effetto dell'aumento della forza fisica di vincolazione. Valori moderati miglioravano la generalizzazione, mentre un pesaggio troppo forte tendeva a gradienti di hotspot troppo lisce e netti. Questo comportamento è coerente con le strutture termiche osservate nelle immagini infrarosse, dove le regioni fisicamente lisce coesistono con concentrazioni localizzate ad alta temperatura.
Va sottolineato che la formulazione di diffusione a regime stazionario utilizzata in questo lavoro non intende rappresentare il meccanismo completo di trasferimento di calore che regola la formazione dei punti caldi nelle apparecchiature ad alta tensione. In pratica, il surriscaldamento localizzato deriva da processi interni di generazione di calore come il riscaldamento Joule, la resistenza di contatto e il degrado dell'isolamento. Poiché il dataset disponibile consiste in immagini termografiche istantanee senza informazioni temporali o misurazioni di sorgente, il vincolo di diffusione viene utilizzato come termine di regolarizzazione spaziale ispirato dalla fisica. Il suo ruolo è quello di favorire campi di temperatura localmente lisci e fisicamente plausibili, permettendo al contempo di apprendere le caratteristiche del punto caldo dai dati. Pertanto, la diffusione prior dovrebbe essere interpretata come un vincolo di fluidità spaziale piuttosto che come un modello completo della fisica termica sottostante.
Diffusività termica apprendibile e aumento a termine sorgente
Per migliorare l'interpretabilità fisica, la diffusività termica efficace è stata trattata come un parametro scalare addestrabile. Sia T̂(x, y) il campo di temperatura previsto e α > 0 la diffusività termica apprendibile. Per imporre positività, α è stata parametrizzata tramite una variabile non vincolata β come

In questa formulazione, il prior fisico è stato scritto in termini di campo di forzamento residuo effettivo R(x, y), dove R(x, y) rappresenta la deviazione locale dalla pura diffusione indotta da effetti di riscaldamento non modellati. La relazione adattivo-diffusività è quindi espressa come

Qui, ∇2T̂(x, y) è il laplaciano del campo di temperatura previsto, e R(x, y) è il termine sorgente residuo effettivo dedotto implicitamente dai dati termografici. Poiché i campioni disponibili sono immagini istantanee invece di sequenze termiche risolte nel tempo, R(x, y) non è supervisionato separatamente e serve solo come quantità fisica latente durante l'ottimizzazione. La corrispondente perdita fisica era definita come

Per l'esperimento aumentato a termine sorgente, è stata aggiunta una testa CNN ausiliaria per stimare una mappa sorgente spaziale Ŝ(x, y). In questo caso, Ŝ(x, y) rappresenta il campo locale di generazione di calore previsto, e la relazione di governo diventa

La testa sorgente era collegata al collo di bottiglia dell'encoder e consisteva in un piccolo ramo convoluzionale che mappava le caratteristiche latenti condivise in una mappa di uscita a canale singolo Ŝ(x, y). Non erano disponibili etichette di fonte vere sul terreno; pertanto, Ŝ(x, y) veniva appreso solo attraverso l'obiettivo congiunto

dove i dati L rappresentano la perdita di regressione di temperatura, λphys controlla il vincolo di diffusione e λs regolarizza la previsione della sorgente per scoraggiare mappe sorgenti banali ad alta magnitudine. Nel contesto basato su snapshot considerato qui, la formulazione del termine sorgente è rimasta sottodeterminata e non migliorò l'accuratezza della previsione.
Abbandono di Monte Carlo per la quantificazione dell'incertezza
Per stimare l'incertezza epistemica nel campo di temperatura previsto, durante l'inferenza è stato applicato il dropout di Monte Carlo. Gli strati di dropout con una velocità di 0,2 venivano posizionati dopo il blocco collo di bottiglia e all'interno degli stadi decodificatori della CNN. Durante i test, questi strati di dropout sono stati mantenuti attivi e sono stati eseguiti 30 passaggi stocastici in avanti per ogni immagine a infrarossi. Per il k-esimo passaggio stocastico, il campo di temperatura previsto è indicato da

dove X è l'immagine infrarossa in ingresso e θk rappresenta i parametri campionati della rete indotti dal dropout. La media predittiva veniva calcolata come

e la varianza predittiva pixel per pixel è stata ottenuta come

con K = 30. La mappa di varianza risultante è stata utilizzata per identificare regioni spaziali con una fiducia predittiva più bassa. Poiché le etichette di incertezza basate sul terreno non sono disponibili per la regressione termografica, l'incertezza è stata valutata utilizzando mappe di varianza pixel per pixel e statistiche riassuntive calcolate su regioni di hotspot e di fondo, piuttosto che metriche basate sulla calibrazione. L'analisi quantitativa ha mostrato che la deviazione standard predittiva media era di 13,046 °C, mentre la regione del punto caldo mostrava una deviazione standard più elevata di 15,934 °C rispetto a 12,743 °C nella regione di fondo. Questo corrisponde a un aumento di circa il 25% dell'incertezza nelle aree di hotspot rispetto allo sfondo. Questi risultati indicano che il modello esprime una maggiore incertezza vicino a regioni termicamente complesse, in particolare intorno ai confini dei punti caldi e ai gradienti di temperatura ripidi, il che è coerente con la struttura osservata nelle visualizzazioni della superficie termica. Il flusso di lavoro è riassunto nelle Figure 3 e 4 che mostrano l'intera pipeline di elaborazione basata su CNN.

Figura 3: Flusso di lavoro. Panoramica della metodologia proposta, inclusa acquisizione di immagini termografiche, pre-elaborazione, estrazione del campo di temperatura, formazione CNN, apprendimento vincolato dalla fisica e quantificazione dell'incertezza. Abbreviazioni; CNN = rete neurale convoluzionale. Clicca qui per visualizzare una versione più grande di questa figura.

Figura 4: Pipeline complessiva di elaborazione basata su CNN. Architettura del framework CNN proposto che mostra la trasformazione delle immagini termografiche a infrarossi in previsioni spaziali del campo di temperatura. Abbreviazioni; CNN = rete neurale convoluzionale. Clicca qui per visualizzare una versione più grande di questa figura.