Con il progressivo integramento della visione artificiale e dell'intelligenza artificiale nel settore dell'abbigliamento, l'analisi delle immagini di capi d'abbigliamento si è gradualmente estesa da compiti di riconoscimento di base ad analisi orientate al design e al supporto decisionale1,2. Nel processo di progettazione dell'abbigliamento, la distinzione tra schemi progettuali dipende maggiormente dalla composizione strutturale e dalle relazioni tra componenti piuttosto che da semplici differenze nell'aspetto, rendendo l'espressività strutturale delle caratteristiche delle immagini di abbigliamento un fattore chiave nell'efficacia dell'analisi assistita dal design3,4. Tuttavia, la maggior parte dei metodi visivi esistenti si basa ancora su texture, colore e contorni globali come caratteristiche principali, rendendo difficile analizzare in modo sistematico le gerarchie dei capi e le differenze costruttive durante il processo di progettazione5,6. Pertanto, lo sviluppo di un metodo di apprendimento delle caratteristiche delle immagini consapevole della struttura è fondamentale per migliorare l'oggettività e la coerenza dell'analisi del design7. Questo protocollo è indicato quando i capi d'abbigliamento condividono colori, texture o contorni globali simili ma differiscono nell'organizzazione dei componenti, nei modelli di connessione o nella disposizione spaziale. In tali condizioni, le rappresentazioni centrate sull'aspetto tendono a posizionare vicini nello spazio delle caratteristiche design strutturalmente diversi, riducendo l'affidabilità del recupero e del confronto tra progetti. Il protocollo affronta compiti in cui le relazioni tra i componenti del capo costituiscono la base principale per il recupero strutturale, la valutazione del design e l'analisi delle differenze localizzate.
Per quanto riguarda la scala dei dati, la complessità del modello e la diversità dei compiti, le attuali ricerche sull'analisi e comprensione automatica delle immagini di abbigliamento hanno compiuto notevoli progressi8,9. Tuttavia, nelle applicazioni pratiche, le informazioni strutturali dei capi di abbigliamento sono spesso incluse in modo implicito nei risultati di segmentazione o rilevamento e non vengono considerate nella modellazione unificata della fase di apprendimento delle caratteristiche, causando una mancanza di distinzione stabile tra diversi design strutturali nello spazio delle caratteristiche10,11. Le relazioni spaziali, i vincoli gerarchici e le strutture topologiche tra i componenti del capo non sono codificati esplicitamente, rendendo difficile per le rappresentazioni delle caratteristiche riflettere le differenze strutturali a livello di design12,13. L'assenza di una modellazione strutturale esplicita limita la granularità analitica e l'affidabilità delle decisioni basate sulle caratteristiche delle immagini di abbigliamento in scenari di supporto alla progettazione, costituendo un ostacolo significativo allo sviluppo di sistemi di design intelligenti dotati di una comprensione semantica più profonda14.
Per supportare l'apprendimento e l'analisi delle caratteristiche delle immagini di abbigliamento, studi precedenti hanno esplorato diverse direzioni tecnologiche15. I metodi di segmentazione semantica e di analisi dei capi d'abbigliamento hanno permesso una delimitazione fine delle regioni e dei componenti dei capi attraverso annotazioni a livello di pixel, fornendo una base per l'estrazione di informazioni strutturali16,17. I metodi di recupero di capi d'abbigliamento basati su query immagine hanno integrato fusione di topologia e colore/texture, allineamento dell'attenzione globale e locale, analisi dei capi, rappresentazioni multiscala e multilivello, nonché attenzione residua con selezione delle caratteristiche. Questi metodi affrontano ricerche nel catalogo, abbinamento da consumatore a negozio, recupero di prodotti cross-domain e ricerca visiva nel commercio elettronico. I loro contesti applicativi sono strettamente legati al recupero di riferimenti per il design, poiché ciascun metodo ordina le immagini dei capi in base a una query visiva, anche se le loro rappresentazioni non conservano le relazioni di adiacenza tra componenti tipizzati e l'ordine verticale durante tutta la fusione delle caratteristiche18,19,20. Nel frattempo, la ricerca in scenari di design e raccomandazione ha gradualmente introdotto fusione multimodale, modellazione delle relazioni e analisi dello stile, ampliando i confini applicativi delle caratteristiche visive dell'abbigliamento21,22. Sebbene questi metodi abbiano compiuto progressi nei rispettivi compiti, le loro caratteristiche principali si basano ancora in larga misura su descrizioni dell'aspetto, e le informazioni strutturali non sono state modellate in modo uniforme come vincolo intrinseco per l'apprendimento delle caratteristiche, rendendo difficile soddisfare le esigenze di assistenza al design dell'abbigliamento in termini di allineamento strutturale e confronto strutturale23.
Per affrontare la limitata capacità di differenziazione strutturale nell'assistenza alla progettazione di capi d'abbigliamento, questo articolo propone un metodo di apprendimento delle caratteristiche delle immagini basato sulla percezione della struttura del capo. Questo metodo incorpora i risultati dell'analisi del capo e informazioni chiave sulla struttura nella fase iniziale di input dell'immagine del capo, modellando congiuntamente le regioni dei componenti del capo, le relazioni spaziali e le connessioni gerarchiche. La codifica delle relazioni strutturali e l'allineamento delle caratteristiche visive integrano esplicitamente vincoli del capo nel processo di apprendimento delle caratteristiche, producendo una rappresentazione che preserva sia l'aspetto visivo sia la coerenza strutturale. Questa caratteristica descrive le differenze strutturali dei capi all'interno di uno spazio unificato, fornendo una base stabile per analisi successive di similarità strutturale, clustering strutturale e decisioni assistite nella progettazione, alleviando così il problema di confusione delle caratteristiche causato dalla mancanza di modellazione strutturale nei metodi esistenti. A differenza delle strategie generali di recupero visivo che trattano l'informazione strutturale come attributi ausiliari debolmente connessi, questo framework costruisce un meccanismo di modulazione delle caratteristiche centrato sulle relazioni topologiche. Il meccanismo favorisce una rappresentazione appresa che segue l'organizzazione visibile delle regioni del capo riducendo al contempo le risposte dominate dalla trama. Ogni nodo del grafo rappresenta una regione semantica a livello di immagine, e ogni relazione del grafo descrive un'adiacenza visibile o una posizione relativa normalizzata nel piano dell'immagine. L'embedding risultante supporta il confronto tra la disposizione dei componenti e l'organizzazione della sagoma in diverse immagini di capi. Queste regioni e relazioni non corrispondono a pezzi di cartamodelli, cuciture, punti di riferimento costruttivi o parametri di gradazione. Rispetto ai metodi di recupero basati sull'aspetto, il protocollo mantiene esplicitamente la topologia dei componenti durante l'intero processo di apprendimento delle caratteristiche, piuttosto che trattare l'informazione strutturale come risultato di un'analisi successiva. Rispetto agli approcci che introducono indizi strutturali soltanto come input ausiliari, la codifica a doppio flusso e la fusione coerente con la topologia preservano le relazioni geometriche riducendo al contempo le risposte dominate dalla trama. La rappresentazione risultante supporta il recupero della struttura del capo, il clustering strutturale, la selezione di riferimenti per la progettazione e l'analisi localizzata delle differenze di design, fornendo al contempo evidenze a livello di componente interpretabili all'interno del processo di progettazione del capo. La ricerca pertinente a questo protocollo comprende l'apprendimento delle caratteristiche nelle immagini di abbigliamento, la modellazione della struttura del capo, la rappresentazione consapevole della struttura e l'analisi visiva per l'assistenza alla progettazione dell'abbigliamento.
A livello di rappresentazione delle caratteristiche, la ricerca sulle immagini di abbigliamento si è a lungo concentrata sulla modellazione dell'aspetto, sull'estrazione di caratteristiche profonde e sulla rappresentazione multiscala24,25. I primi lavori utilizzavano reti neurali convoluzionali per eseguire una modellazione end-to-end delle immagini di abbigliamento per compiti di classificazione, recupero e abbinamento di similarità26,27. Successivamente, sono state introdotte la fusione di caratteristiche multiscala e l'apprendimento cross-domain per attenuare le differenze nelle immagini di abbigliamento in condizioni diverse di angolazione, posa e ripresa28,29. Nei compiti di recupero, sono stati impiegati meccanismi di attenzione e strategie di compressione delle caratteristiche per migliorare la discriminatività delle caratteristiche e l'efficienza computazionale30,31. Questi metodi raggiungono una discriminazione dell'aspetto affidabile, ma i loro processi di apprendimento delle caratteristiche si concentrano ancora sull'informazione visiva globale e mancano di rappresentazioni sistematiche delle strutture interne dei capi d'abbigliamento32. I metodi di recupero di moda compositi combinano ulteriormente un'immagine di riferimento con istruzioni testuali di modifica, ma la loro modalità di interrogazione differisce dal protocollo basato esclusivamente su immagini analizzato in questo studio. Tali approcci vengono esaminati come direzione correlata nel recupero commerciale e non sono inclusi nel confronto quantitativo, poiché l'input testuale aggiuntivo impedirebbe una valutazione controllata basata esclusivamente sull'immagine.
Poiché l'analisi delle immagini di abbigliamento si è spostata dal riconoscimento dell'aspetto alla comprensione strutturale, la ricerca si è concentrata sempre di più sulla modellazione dei componenti dei capi, delle relazioni geometriche e delle connessioni topologiche33. Le reti di segmentazione semantica hanno permesso un'analisi a livello di componente del capo d'abbigliamento attraverso la proiezione di caratteristiche e meccanismi di attenzione multipla, fornendo una base affidabile per l'estrazione di informazioni strutturali34,35. Metodi basati sulla rilevazione di punti chiave e sulla modellazione della topologia strutturale hanno ulteriormente caratterizzato il rapporto tra i contorni del capo e le strutture locali, potenziando la capacità del modello di rappresentare le caratteristiche geometriche dei vestiti36,37. Alcuni studi hanno introdotto strutture a grafo e reti di ragionamento relazionale per modellare le relazioni tra i componenti dell'abbigliamento, migliorando così le prestazioni nel riconoscimento fine e nel reperimento cross-domain38,39. Questi lavori hanno confermato il ruolo importante delle informazioni strutturali nell'analisi visiva, ma finora la struttura è stata utilizzata principalmente come caratteristica ausiliaria o risultato intermedio, senza che sia stata sviluppata una rete di apprendimento delle caratteristiche centrata su vincoli strutturali40.
Nell'ambito dell'assistenza alla progettazione di abbigliamento, questi sviluppi hanno sostenuto raccomandazioni di design, analisi dello stile, costruzione di sistemi interattivi e valutazione del design orientata alla struttura41. La ricerca sui sistemi di raccomandazione ha ottenuto abbinamenti di capi d'abbigliamento e raccomandazioni personalizzate integrando caratteristiche visive con le preferenze degli utenti42. I lavori relativi all'assistenza alla progettazione hanno esplorato nuove strade per il supporto intelligente al design combinando modelli generativi, modellazione dello stile e meccanismi di collaborazione uomo-computer43. La ricerca su provini virtuali, misurazione delle taglie e trasferimento di stile ha ampliato l'applicazione dell'analisi visiva dell'abbigliamento in tutto il processo di progettazione e produzione. Sebbene questi studi abbiano arricchito le forme tecniche di assistenza alla progettazione di abbigliamento, le loro caratteristiche visive principali sono ancora guidate principalmente dall'aspetto e mancano di una rappresentazione unificata della struttura del design per l'analisi. Al contrario, questo articolo considera la struttura del capo d'abbigliamento come vincolo fondamentale nella rappresentazione delle caratteristiche e fornisce un metodo di rappresentazione visiva per l'analisi strutturale nell'assistenza alla progettazione di abbigliamento.
Nonostante questi sviluppi, i metodi recenti nella progettazione generativa spesso trattano le condizioni strutturali come matrici di guida spaziale approssimativa all'interno dei processi di diffusione. I moderni framework di analisi strutturale rappresentano le topologie come etichette semantiche ausiliarie, separate dallo spazio primario di incorporamento visivo. Il framework proposto modifica questo meccanismo definendo un vincolo topologico basato su grafi con priorità che modula esplicitamente l'apprendimento delle caratteristiche visive a livello di componente. L'obiettivo di coerenza multilivello incoraggia che capi d'abbigliamento con layout simili a livello di componente nell'immagine rimangano vicini nello spazio delle caratteristiche, separando al contempo capi con diverse organizzazioni delle regioni visibili. Tale obiettivo riduce la dipendenza dalla trama nell'ambiente di recupero valutato, ma non stabilisce invarianza rispetto a cambiamenti nel materiale, nella posa o nello sfondo. Il protocollo deve essere selezionato quando l'immagine in ingresso contiene un capo d'abbigliamento singolo sufficientemente visibile, i componenti semantici mantengono confini identificabili e l'obiettivo analitico richiede un confronto strutturale a livello di componente piuttosto che un riconoscimento di categoria grossolano. È destinato a ricercatori nel campo della visione artificiale, ricercatori nel design dell'abbigliamento e team di sviluppo digitale di capi d'abbigliamento impegnati in analisi visive sensibili alla struttura. Non è destinato a compiti incentrati esclusivamente sul riconoscimento di colore o materiale, né a immagini in cui la topologia del capo è in gran parte oscurata. Il protocollo seguente presenta il flusso di lavoro dalla preparazione del dataset e dalla mappatura delle probabilità semantiche alla costruzione delle relazioni geometriche, alla codifica delle caratteristiche a doppio flusso, alla fusione guidata dalla struttura e all'ottimizzazione basata sulla coerenza. L'intero flusso di lavoro è riassunto in Figura 1.