Summary
Qui presentiamo un protocollo per l'amministrazione del video-referenziati rating di reciproco comportamento sociale (vrRSB) utilizzando una carta o una versione online. Questa indagine quantifica RSB, un prerequisito per la competenza sociale, nei bambini attraverso elementi "video-fatto riferimento" per cui un oggetto viene confrontato con un bambino di riferimento mostrato in un video di tre minuti.
Abstract
Comportamento sociale reciproco (RSB), una precoce emergenti capacità di impegnarsi in contingenza sociale — che è fondamentale per l'apprendimento sociale e di competenza sociale — è supposto per essere interrotta nel disturbo dello spettro autistico (ASD). La capacità di quantificare la gamma completa di RSB durante il periodo del bambino, quando i sintomi di nucleo di ASD presentano spesso, è fondamentale per la valutazione di rischio precoce per ASD, che caratterizzano lo sviluppo sociale e risposta ai primi interventi di monitoraggio. Tuttavia, importanti parametri di variazione in RSB — soprattutto prima dello sviluppo del linguaggio verbale — può essere sfumata e difficili da caratterizzare utilizzando metodi basati sul questionario. Per affrontare questa sfida, abbiamo sviluppato un sistema per misurare la variazione quantitativa in RSB nei bambini (età 18-30 mesi) che incorporava i dati del questionario non solo standard da operatori sanitari, ma anche un romanzo insieme di elementi a cui fa riferimento video, attraverso il quale un intervistato viene confrontato il comportamento di un soggetto a quella osservata in un breve video di un bambino in giovane età che si manifesta un livello altamente competente della comunicazione sociale. La prova di questa misura in un campione di popolazione generale dei gemelli ha confermato che sia gli elementi di riferimento a video e il punteggio totale di RSB (riferimento a video gli elementi più elementi-video-referenziati) visualizzato unimodale, distribuzioni continue, forte interno coerenza, contrassegnato la conservazione delle differenze individuali ed estremamente alta ereditabilità. Inoltre, gli elementi a cui fa riferimento video erano particolarmente sensibili per quantificare le modifiche incrementali in comunicazione sociale, un elemento importante di RSB, nel corso di sviluppo della prima infanzia. Punteggi sul vrRSB ben differenziano bambini con e senza ASD e questi dati comprendono una convalida iniziale di questo promettente metodo per quantificare RSB primi — Croce-scritta secondo la tradizione, nel corso del tempo e come una funzione di intervento precoce.
Introduction
Un prerequisito per lo sviluppo della competenza sociale è reciproco comportamento sociale (RSB), la normativa capacità di impegnarsi in un comportamento appropriato emotivamente, socialmente contingente con altri1. Rottura di RSB, che è associato con i deficit marcati nella comunicazione sociale, consapevolezza interpersonale e interesse sociale e impegno, è una caratteristica di definizione di disturbo dello spettro autistico (ASD). Questa condizione di neurodevelopmental ereditabile, che presenta con una vasta gamma di danno nella funzione sociale e adattivo, generalmente si pone dal periodo del bambino e può rispondere all'intervento precoce. Quantificazione di RSB nella vita in anticipo così è rilevante sia per la valutazione clinica di ASD del rischio, così come caratterizzazione dello sviluppo tipico della competenza sociale.
La scala sociale di reattività (SRS) è una scala di valutazione quantitativa rapida di RSB applicabile per i bambini sopra l'età di 30 mesi. Questa misura di badante-relazione capitalizza il osservazioni cumulativo degli intervistati di un bambino in situazioni naturalistiche per ottenere voti sfumate di RSB. Oggetti di query impressioni dei valutatori, circa l'entità del deficit di comunicazione sociale e di comportamenti ripetitivi con restrizioni, i domini di sintomo di due core di ASD2, un bambino, quindi l'indicizzazione i deficit quantitativi in RSB. Approfondite ricerche con il SRS ha confermato la sua forte proprietà psicometriche3, tra cui un continuo, unimodale Punteggio distribuzione che comprende la variazione nella popolazione generale mentre anche differenziare gli individui con ASD4 ,5. La variazione quantitativa in RSB esibisce la stabilità longitudinale6, coerente con un tratto comportamentale; è distinguibile dalla funzione adattiva7, un altro aspetto saliente della compromissione ASD; ed è ereditabile5,8,9,10,11, sostenendo l'attinenza di RSB con la genetica e neurobiologia sottostante ASD.
Perché il servizio SRS si estende solo verso il basso a 30 mesi di età, un'alternativa rapida, misura quantitativa di RSB per i più piccoli è necessario un) quantificare i primi segni di rischio ASD e b) tenere traccia delle risposte per gli interventi precoci per ASD. Tuttavia, misura di RSB nei bambini è complicata dal sostanziale variazione inter-individuale nelle capacità comunicativa sociale, che può essere difficile per valutatori differenziare le descrizioni scritte in modo affidabile base su. Inoltre, le impressioni degli operatori sanitari possono essere suscettibili di consistenza ridotta, a causa della soggettività insita di interpretazione limitata output verbale nei bambini, la sensibilità del comportamento del bambino ai contesti situazionali e ambientali e la progressione accelerata di abilità sociali durante un periodo prolifico di sviluppo.
Per affrontare queste sfide metodologiche, abbiamo sviluppato il riferimento a video valutazione di reciproco comportamento sociale (vrRSB), un indice quantitativo di RSB progettato per bambini 18-30 mesi di età12. Abbiamo usato due strategie per rappresentare la continuità basata su tratto di RSB mentre sensibilità al cambiamento inerente allo sviluppo precoce in RSB di conferimento. In primo luogo, per promuovere l'omologia tra il vrRSB e il SRS, abbiamo adattato un sottoinsieme di elementi da SRS affinché fossero inerente allo sviluppo appropriati per i più piccoli. In secondo luogo, abbiamo inserito una serie di romanzo, oggetti unici di riferimento a video in cui gli operatori sanitari voto comportamento comunicativo sociale del loro bambino rispetto a quella di un bambino videoregistrato che serve come una punteggio ancora. Questo approccio in maiuscolo sull'effetto di riferimento, nel quale fornire informazioni contestuali aggiuntive per valutatori migliora sia affidabilità e validità della caratteristica comportamentale di misura13,14. Qui, un quadro di riferimento visivo è stato fornito da un 3 minuti di video montaggio di un'in via di sviluppo in genere 19 - mese vecchio visualizzazione abilità forti di comunicazione sociale mentre sono impegnati in un'interazione basata su gioca con un adulto. Poiché gli aspetti di RSB sono altamente correlati all'interno di individui15,16, il video presentava una visione multiforme di un singolo bambino, piuttosto che una breve clip di parecchi bambini, per migliorare la validità ecologica. Precedenti studi inoltre sostengono la validità ecologica dell'approccio video-referenziati, come segni sottili di ASD possono essere rilevati su osservazioni videoregistrate prima della diagnosi clinica17,18. Video selezionato segmenti visivamente evidenziati segni distintivi della comunicazione sociale, tra cui turni, motivazione ad impegnarsi, e la reattività al sociale ed emotivo di stecche1, garantendo la validità di contenuto per gli aspetti essenziali di RSB, e lingua parlata uso era limitato ad evitare l'attribuzione di rater dell'abilità linguistica di RSB.
A nostra conoscenza, non c'è attualmente nessuna misura breve alternativa di RSB per i più piccoli quali variazione dimensionale di indici in RSB casi di ASD o altri ritardi sociali sia nella popolazione generale. Vagli di badante-report stabilita per ASD e relativi ritardi nei bambini, come ad esempio l'elenco di controllo per volta per Autism in Toddlers (M-CHAT)19 o la comunicazione e scale di comportamento simbolico (CSBS)20 consistono generalmente di elementi che indica o meno una pietra miliare del comportamento è stato raggiunto e non sono esplicitamente progettati per quantificare sottile variazione in competenza sociale. Inoltre, a differenza di vrRSB, questi strumenti non sono specifici di RSB e non indice di livelli di sintomi autistici del centro (cioè, danno nella comunicazione sociale e comportamento limitato, ripetitivo). Valutazioni d'osservazione, quali l'Autism Diagnostic Observation Schedule21, sono state sviluppate per aiutare con diagnosi; Tuttavia, questi sono generalmente tempo-intenso, con una durata di 40-60 minuti e richiedono di valutatori qualificati, limitando la loro fattibilità in alcune cliniche. Nessuna formazione è necessaria per completare il vrRSB, che lo rende appropriato per l'utilizzo con gli operatori sanitari, fornitori di servizi e altri informatori che hanno sufficiente esperienza recente osservazione naturalistica interazioni sociali del bambino e che capiscono l'inglese scritto. La misura, anche il video di 3 minuti, è breve, che richiede 15-20 minuti ed è favorevole all'amministrazione di persona o a distanza, come si può essere spedito ai partecipanti o completato online22. Così, il vrRSB brevità, accessibilità e flessibilità facilitarne l'attuazione nelle impostazioni di ricerca, cliniche ed educative di ottenere seriale, quantitativo misura della RSB ad un'età più giovane rispetto al passato possibile.
Protocol
Tutti i metodi descritti qui sono stati approvati da istituzionale recensione Consiglio della Washington University a St. Louis (umano Resource Protection Office Number: 201208010).
1. ottenere il vrRSB
- Per ottenere una copia della vrRSB, inviare una richiesta via e-mail all'autore senior, John Constantino (constantino@wustl.edu).
- Specificare una preferenza per la versione online del vrRSB o il formato cartaceo.
- Siete pregati di notare che la versione online ("Online_vrRSB") è formattata per l'implementazione in REDCap, un strumento di raccolta di dati online, sicuro e ampiamente utilizzato (www.projectredcap.org) disponibile per gli individui alle istituzioni che sono membri del Consorzio REDCap.
- Siete pregati di notare che la versione cartacea include PDF del questionario, una copia del collegamento online protetto da password per le clip video e segnando le istruzioni. Le parti interessate possono inoltre richiedere copie cartacee di questi file, come pure un DVD con il video.
2. caricamento e consentendo l'Online vrRSB in REDCap
- Salvare il file in linea per il vrRSB (Online_vrRSB) in una posizione nota del computer.
- Prima di caricare il Online_vrRSB in REDCap, creare un nuovo progetto per ospitare il questionario in REDCap. In primo luogo, login a REDCap e fare clic su Nuovo progetto sulla barra multifunzione nella parte superiore della pagina. Questo passaggio lancerà una pagina Crea un nuovo progetto REDCap .
- Inserire specifici dello studio del testo nei campi titolo del progetto e lo scopo del progetto. Questi campi sono obbligatori per procedere.
- Per il prompt avviare il progetto da zero o iniziare con un modello? selezionare il pulsante di opzione caricare un file di xml project REDCap. Dovrebbe apparire un finestra che fornisce accesso al file del computer; scegliere il file Online_vrRSB dal passaggio 2.1 e fare clic su Apri.
- Scorrere fino alla fine della pagina e fare clic su Crea progetto. Questo passaggio si aprirà una pagina delle impostazioni di progetto, che fornisce un flusso di lavoro per incorporare sondaggi in un progetto REDCap.
- Nella casella Impostazioni di progetto principale, fare clic su attiva accanto all'opzione sondaggi di uso in questo progetto. Questo passaggio permette il vrRSB sia accessibile all'interno del progetto.
- Procedere alla casella successiva, etichettata disegno vostri strumenti di raccolta dati e abilitare i sondaggi. Scegliere finestra di progettazione Online. Si aprirà una schermata con una tabella degli strumenti all'interno del progetto.
- Nella riga che contiene il vrRSB, fare clic su attivare un sondaggio. Quindi dovrebbe apparire una scheda impostare la mia indagine .
- Scorrere fino alla fine della pagina e fare clic su Salva modifiche per completare l'attivazione del vrRSB in un progetto REDCap.
3. personalizzare la presentazione del Online vrRSB in REDCap
- Fare clic su Progetto Home nel menu laterale e individuare la casella Operazioni rapide .
- Nella finestra di Attività rapide , selezionare dizionario di dati di progettazione e caricare Online per aprire una tabella di strumenti di raccolta dati inserzione il vrRSB come parte del progetto REDCap.
- Per modificare le istruzioni all'interno del testo vrRSB, scegliere il profilo vrRSB . Clicca sulla matita in alto a sinistra delle caselle di testo specifico per modificare il testo esistente e premere Salva dopo ogni modifica.
- Nella casella pagina di benvenuto, fornire informazioni di base specifici dello studio come appropriato (per suggerimenti, vedere il punto 4.2).
- Fare clic su Aggiungi campi per consentire l'immissione di ulteriori caratteristiche partecipante se necessario. Il modello attuale include età del bambino nominale in mesi, il sesso e la relazione del valutatore per il bambino.
- Modificare le istruzioni che precedono gli elementi a cui fa riferimento video inserendo una persona da contattare Studio in caso di difficoltà tecniche con il video.
- Per personalizzare il formato di indagine (ad esempio il colore di sfondo, font), fare clic su impostazioni di rilievo nella riga per il vrRSB all'interno della tabella di strumenti di raccolta dati.
- Per ottenere un collegamento online per l'indagine, tornare alla Pagina iniziale progetto e fare clic su Gestisci partecipanti all'indagine nella casella Operazioni rapide . Si aprirà una pagina di link indagine pubblica , che fornisce un URL per l'indagine. Fare clic sul pulsante accanto all'URL per copiare il link dell'indagine.
- Per e-mail un link per studiare i partecipanti, selezionare la scheda di elenco partecipanti fare clic su Aggiungi partecipanti di inserire e-mail e comporre gli inviti ai sondaggi pulsante per generare un email introduttivo.
4. il vrRSB di amministrazione
- Selezionare intervistati che capiscono scritti inglese e che hanno trascorso almeno 6 ore ad osservare il bambino di destinazione (18-30 mesi di età) il mese scorso. Completamento della vrRSB non richiede o assumere la formazione specializzata, solo che gli intervistati ordinariamente hanno osservato il comportamento di un bambino in giovane età nella sua naturale interazioni con altre persone. Gli intervistati possono includere gli operatori sanitari, medici, professionisti che hanno lavorato a stretto contatto con un bambino, o i ricercatori che desiderano utilizzano l'ancoraggio segnando dei video per generare voti calibrati per confrontare diversi elementi figlio.
Nota: Un'osservazione di 30 minuti di un bambino impegnato in una sessione di gioco interattivo semistrutturati ha dimostrato di essere sufficiente per valutatori fornire punteggi distinguendo bambini con e senza ASD12. Il punto di riferimento di 6 ore è destinato a rappresentare la maggiore variabilità prevista in situazioni sociali reali. - Nel presentare l'indagine ai dichiaranti, fornire informazioni di base per chiarimenti, ad es., lo scopo per l'amministrazione del vrRSB, l'uso di articoli video-referenziati e l'orario previsto per il completamento (10-15 minuti).
- Per i casi in cui gli intervistati partecipano in remoto, è necessario includere tali informazioni in una lettera di copertura che accompagna il vrRSB.
- Per i casi in cui i partecipanti completare il vrRSB online, fornire l'indirizzo web per accedere alla vrRSB.
- Spiegare se il video dell'ancoraggio notante è possibile accedere online o da un DVD. Per l'accesso online, includere l'indirizzo web e la password.
- Informare gli intervistati chi contattare per aiuto dovrebbero avere difficoltà accedere il video completo, vedendo le immagini o sentire un suono. Nella versione online, questa notifica è inclusa nelle istruzioni precedenti gli elementi video-referenziati (punto 3.3).
- Ricordare agli intervistati di frequentare per l'intero clip video di 3 minuti, che si può guardare più di una volta.
Nota: Intervistati successiva completano domande 1-13, gli elementi di riferimento a video, in cui si trovano per confrontare le abilità sociali attuali del bambino soggetto a quello del bambino nel video - l'ancoraggio segnando. Dopo il completamento degli elementi a cui fa riferimento video, intervistati sono per completare gli elementi rimanenti-video-referenziati, che descrivono aspetti caratteristici del comportamento sociale. Sia video- e -video-referenziati elementi utilizzano una scala di valutazione Likert di quattro punti, e le istruzioni scritte precedono entrambi i set di elementi nel corpo del questionario (appendice 1).
5. automatizzato Scoring del vrRSB Online
- Per visualizzare un individuo di punteggi (che possono essere utile nelle regolazioni cliniche), fare clic su Aggiungi/modifica record in raccolta dati nel menu laterale.
- Nella schermata seguente, sotto scegliere un'identificazione di partecipazione esistenti n., selezionare il partecipante dal menu a discesa. Verrà visualizzata la pagina di casa di Record per tale partecipante, che contiene una tabella che elenca gli strumenti raccolti per tale partecipante.
- Per l'accesso totale e punteggi di subscale per tale partecipante, fare clic su stato nella riga per i punteggi di vrRSB.
- Per visualizzare vrRSB punteggi per tutti i partecipanti un determinato studio, tornare alla pagina iniziale del progetto e fare clic su Crea un report.
- Immettere un nome per il report nella casella di testo e procedere al passaggio 2, che consente la selezione di campi di dati da includere nel report.
- Accanto all'opzione aggiungere tutti i campi selezionati strumenti, selezionare vrRSB punteggi dal menu a discesa per ottenere punteggi totale e sottoscala. Per dati a livello di elemento, selezionare vrRSB. Per mantenere solo un sottoinsieme dei campi disponibili nel report, clicca la x rossa a destra dei campi indesiderati così sono esclusi.
- Scorrere fino alla fine della pagina e fare clic su Salva rapporto. Accetta l'opzione di ritorno ai miei rapporti e le esportazioni, che consente di visualizzare una tabella che include una riga con il report appena creato.
- Fare clic su Visualizza report per visualizzare i punteggi (tabella 1) per tutti i partecipanti. Per tornare alla tabella delle opzioni di visualizzazione, fare clic sulla scheda 'Report personali e le esportazioni'.
- Fare clic su Esporta dati e selezionare il formato di scelta (ad esempio, il formato csv). Quindi fare clic su pulsante di esportazione dati in basso a destra. Nella schermata di follow-up, fare clic sull'icona conferma il formato dati per continuare.
- Fare clic sul pulsante "Statistiche e grafici" per visualizzare le statistiche descrittive (ad es., mezzi per punteggi totali, deviazioni standard) e scatterplot dei punteggi vrRSB in REDCap.
6. manuale Scoring della vrRSB
- Identificare gli elementi come ha ottenuto avanti o retromarcia-segnato (tabella 1, classificazione di Forward-e Reverse-Scored elementi).
Nota: Poiché la scala è progettata per quantificare i deficit in RSB, un indicatore del livello di sintomi autistici del centro, valori più alti di punto indicano livelli più bassi di RSB. Ha ottenuto avanti gli elementi sono quelli per i quali una risposta più positiva indica meno appropriato comportamento sociale reciproco. Retromarcia-notato elementi sono quelli per i quali una risposta più positiva indica più appropriato comportamento sociale reciproco. - Assegnare ogni risposta un valore, come indicato nella tabella 1 (punto valori per elemento voti).
- Assegnare un valore pari a zero per mancante elemento risposte. Indagini con più di quattro risposte mancante sono considerati non validi.
- Una volta che gli elementi sono stati assegnati i valori di punto adeguato, aggiungere gli elementi appropriati insieme per i principali spartiti o subscale partizioni di scelta (tabella 1).
Nota: Opzioni di Punteggio principale includono il punteggio totale di RSB (video-referenziati plus -video-referenziati elementi RSB) e il Punteggio Video-referenziati; Subscale elemento totali sono anche noti per i domini di sintomo di 2 core per ASD (cioè, comunicazione sociale e comportamento limitato, ripetitivo). Punteggi ≥ 2 deviazioni standard sotto la media, nella parte inferiore 5% dei punteggi ottenuti in una popolazione generale campione12, sono indicative di carenze in RSB (tabella 1). - Si noti che alcuni elementi non sono inclusi nella classifica punti per il vrRSB. Questi elementi supplementari forniscono informazioni di carattere generale sugli aspetti di sviluppo diverso da RSB, che possono essere di interesse per i ricercatori inerente allo sviluppo. Vedere la didascalia della tabella 1 per ulteriori dettagli.
Representative Results
Il vrRSB è stato testato in 156 accoppiamenti gemellati epidemiologicamente accertati dal Missouri famiglia registro come parte dello primi reciproco sociale comportamento studio, uno studio prospettico, longitudinale dello sviluppo di RSB12. Abbiamo scelto un disegno di studio doppia di esaminare se la vrRSB in grado di rilevare le differenze individuali in RSB all'interno per i più piccoli dalla popolazione in generale e se questa variazione è ereditabile. Entrambe queste caratteristiche sono state dimostrate con il SRS in bambini più anziani5,8 e sono fondamentali per valutare la capacità di vrRSB per catturare geneticamente informativo varianza in RSB che è rilevante per tipici e atipici sviluppo.
Caregivers completate misure comportamentali sui gemelli a 18, 24, 36 e 48 mesi di età; il vrRSB (principalmente la versione cartacea, come la versione online è stata sviluppata più successivamente nello studio) è stato raccolto presso i punti di tempo 18 e 24 mesi. Il campione è stato principalmente caucasici (80,1%) e non-latino americano (91,6%), simile al Missouri popolazione23, mentre il reddito familiare annuale mediano del campione ($60.001 - $90.000) era superiore a quello del Missouri ($47.200). Feedback informale da parte dei partecipanti per quanto riguarda l'indagine è stata generalmente positiva, con oltre il 95% delle indagini restituiti correttamente in fase di completamento. Per tenere conto non indipendenza dei dati singoli, analisi di affidabilità, correlazioni comportamentali e longitudinale differenze incluso dati da una doppia selezionato in modo casuale. Un bambino, che ha subito una regressione inerente allo sviluppo e alla fine ha ricevuto una diagnosi di comunità di ASD, è stata esclusa da queste analisi di singoli.
Sia i punteggi dei Video-referenziati e il punteggio totale di RSB ha dimostrato una distribuzione unimodale continua, a 18 e 24 mesi attraverso il campione di popolazione generale (Figura 1). Per il Punteggio Video-referenziati, una maggiore preponderanza di punteggi inferiori a 24 mesi di età ha suggerito un effetto lieve piano a causa di sviluppo più avanzati (punteggi più elevati indicano meno RSB). Distribuzioni del punteggio totale RSB, come quelli per il SRS3, erano destra-obliqua, riflettendo la piccola percentuale di individui con deficit significativi in RSB. Distribuzioni di Punteggio simili sono stati osservati in un campione indipendente dei gemelli principalmente ispanico, bilingue dalla California (dati non pubblicati, Harris, B., 2017).
Buona affidabilità interna per entrambi riferimento a video gli elementi e il punteggio totale RSB è stata osservata a 18 mesi (alfa di Cronbach Video-referenziati punteggio =.841, p <. 001; Alfa di Cronbach RSB Punteggio totale =.879, p <.001) e 24 mesi (alfa di Cronbach Video-referenziati punteggio =.881, p <. 001; Alfa di Cronbach RSB Punteggio totale =.868, p <.001. La forte coerenza interna suggerisce che questi indici elemento rappresentano costrutti coesive in tutto quasi.
Affidabilità test-retest è stata calcolata secondo coefficienti di correlazione intraclasse (ICCs; misure singole misti bidirezionale) basati su punteggi ottenuti presso i punti di tempo 18 e 24 mesi. Affidabilità buona prova di 6 mesi-nuovo test è stata osservata per il Punteggio Video-referenziati (ICC(3,1) =.505, p <,001, Figura 2a), e test-retest forte affidabilità è stata osservata per Punteggio totale RSB (ICC(3,1) =.735, p <. 001; Figura 2b).
Oltre a mostrare affidabilità test-retest e, per estensione, la capacità di rilevare la consistenza caratteristica-relative in RSB attraverso il tempo, un obiettivo importante per la vrRSB era per seguire i progressi in RSB sopra sviluppo. Entrambi i Video-referenziati e punteggio totale RSB erano in grado di rilevare il miglioramento significativo in RSB nel corso del tempo, si manifesta con punteggi in diminuzione (punteggi più bassi significano migliore RSB) tra i 18 e i 24 mesi (tabella 2). Video-referenziati punteggi hanno mostrato un grande effetto per queste diminuzioni vs il punteggio totale di RSB (d di Cohen = 0,66 vs 0.48). Calcoli effettuati separatamente per gli elementi non-video-referenziati (tabella 2), che non sono stati progettati per tenere traccia di cambiamento, ha rivelato una dimensione molto più piccola di effetto per questi elementi (d di Cohen = 0.22).
Poiché la variazione in RSB è stato indicato per essere ereditabile in popolazioni più anziane, gemello-gemello concordanze sono stati calcolati per punteggi dei Video-referenziati e punteggi totali RSB a 18 mesi (tabella 3). Maggiore correlazione intraclasse in gemelli monozigoti (identici), che condividono tutti i loro materiale genetico, vs gemelli dizygotic (fraterni), che condividono il media metà del loro materiale genetico, sono coerenti con ereditabilità di RSB. Concordanze per gemelli monozygotic erano piuttosto elevati e in molti casi all'incirca doppio quelle dei gemelli dizygotic, sostengono un ruolo forte per influenze genetiche. Della nota, concordanze gemello monozigote anche indicano il limite superiore dell'errore di misura possibile. Per entrambe le partiture vrRSB, l'errore di misurazione possibile è meno del 9% a livello del campione intero doppia (errore = 1 - concordanza gemello monozigote).
Come una prova della validità concorrente, abbiamo esaminato le correlazioni dei punteggi sulla M-CHAT, uno screener per ASD, con la vrRSB. Positivo di correlazioni erano costanti con capacità di vrRSB per catturare variazione relazionati al rischio ASD (Video-a cui fa riferimento il Punteggio: r =,444, p <. 001; RSB Punteggio totale: r =.654, p <.001. Abbiamo anche ottenuto le correlazioni tra i punteggi vrRSB e vocabolario espressivo (gol di percentile) come misurato tramite la forma breve per l'inventario MacArthur-Bates comunicativo sviluppo24, dato un atteso rapporto tra lingua e sociale comunicazione. Le correlazioni significative sono state trovate per entrambi il Punteggio Video-referenziati (r =-. 419, p <.001) e il punteggio totale di RSB (r =-. 309, p <.001.
Infine, pilota della prova (tabella 4), abbiamo confrontato i punteggi per i gemelli senza una diagnosi di ASD e un piccolo campione di bambini con una diagnosi della comunità di ASD o una valutazione di autismo o spettro di autismo il Autism Diagnostic Observation Schedule21 (age(SD) di dire: 24.75(5.56) mesi; età gamma: 17-33 mesi). Sia fatto riferimento Video Spartiti e punteggi totali RSB differenziato fra i bambini con e senza ASD, con una dimensione di effetto (d di Cohen) di-1.39 per il Punteggio video-referenziati e -1,66 per il punteggio totale di RSB. Le differenze del gruppo inoltre sono state osservate sui punteggi di elemento per domini di sintomo ASD core (comunicazione sociale: d di Cohen =-1.58; Comportamento limitato, ripetitivo: D di Cohen =-1.52). A livello di punteggi quantitativi di RSB, RSB Punteggio totale sia il Punteggio Video-referenziati a 18 mesi sono stato correlato con punteggi totali su SRS 36 mesi (Video-a cui fa riferimento il Punteggio: r =.298, p =. 001; RSB Punteggio totale: r =.624, p <.001.
Figura 1: Distribuzioni continue di unimodale punteggio per Video-a cui fa riferimento il punteggio e il punteggio totale RSB a 18 e 24 mesi
Pannelli illustrano Spartiti per il vrRSB, compreso entrambi riferimento a Video il punteggio e il punteggio totale di RSB, che è composto di elementi a cui fa riferimento video plus tradizionalmente presentati elementi di indagine adattati dalla scala di reattività sociale. Queste distribuzioni sono basate su un campione di gemelli accertato dalla popolazione generale (n = 156 coppie). Pannelli 1a e 1B spettacolo Spartiti per elementi video-referenziati a 18 e 24 mesi mentre pannelli 1C e 1D RSB punteggi totali alle 18 e 24 mesi. In tutti i casi, i punteggi sono continuamente distribuiti e unimodale, coerente con RSB operando come un costrutto dimensionale nei bambini. Medie e deviazioni standard (SD) sono indicate per ogni punto di tempo nell'angolo superiore destro del pannello. Clicca qui per visualizzare una versione più grande di questa figura.
Figura 2: 6-mese Test-Retest affidabilità per Punteggio Video-referenziati e punteggio totale RSB
Scatterplot illustrare un confronto cross-tempo a 18 e 24 mesi per a cui fa riferimento Video Punteggio degli oggetti (2a) e RSB Punteggio totale (2b). Coefficienti di correlazione intraclasse (ICC(3,1)) Visualizza test-retest buona affidabilità per il Punteggio Video-referenziati. e affidabilità forte prova-nuovo test per Punteggio totale RSB Clicca qui per visualizzare una versione più grande di questa figura.
| Classificazione delle voci di Forward e Reverse-segnato | |||||||||||
| Ha ottenuto avanti gli elementi | 15 - 16, 18-26, 28-34, 36, 40-41, 47, voce appendice 1 | ||||||||||
| Elementi d'inversione-segnato | 1 - 13; 14, 17, 27, 35, 37-39, 42 | ||||||||||
| I valori di punto per elemento voti | |||||||||||
| Elementi a cui fa riferimento video | Elementi di cui si fa riferimento non video | ||||||||||
| Opzione di voto | Niente affatto | Un po ' ma meno di bambino nel video | Circa lo stesso come bambino in video | Più di bambino nel video | Non è vero | A volte vero | Spesso vero | Quasi sempre true | |||
| Avanti-segnato | Nessuno | 0 | 1 | 2 | 3 | ||||||
| Avuto un punteggio di retromarcia | 3 | 2 | 1 | 0 | 3 | 2 | 1 | 0 | |||
| Elenchi di elementi per punteggi principale ed i punteggi di Subscale | |||||||||||
| Scala/Subscale | Numeri | Punteggio ≥ 2 SD della media | |||||||||
| 18 mesi | 24 mesi | ||||||||||
| RSB totale | 1 - 13; 14-42; 47; voce di appendice 1 | 41 | 35 | ||||||||
| Video-referenziati | 1 - 13 | 21 | 19 | ||||||||
| Comunicazione sociale | 1 - 15; 17; 19; 21; 25 - 28; 30; 32 - 33, 35-40, 42, voce appendice 1 | 36 | 32 | ||||||||
| Comportamento ripetitivo con restrizioni | 16, 18, 20, 22-24, 29, 31, 34, 41, 47 | 7 | 5 | ||||||||
Tabella 1: Linee guida per Video-referenziati Scoring valutazione di reciproco comportamento sociale (vrRSB)
Questa tabella fornisce una ripartizione dei tipi di elemento, valori point e gli elenchi di elementi utilizzati per il punteggio. Il vrRSB contiene 2 punteggi principale, il punteggio totale di RSB e il Punteggio di Video-Referenced e 2 punteggi di subscale, comunicazione sociale e comportamento ripetitivo con restrizioni, che includono gli elementi relazionati ai domini 2 core sintomo di ASD. Questi punteggi quantificare il livello di deficit in RSB e così indicano anche l'onere di sintomi autistici del centro. Si noti che gli aspetti di indirizzo selezionare gli elementi di sviluppo generale e questi elementi non sono inclusi nel punteggio. Articoli 49 e 50 forniscono un'indicazione del successo delle due tappe principali del linguaggio per i più piccoli: l'uso della lingua parlata e la combinazione di parole in frasi o frasi. Articolo 43 riguarda sonno insolito, con maggiore approvazione suggerendo un profilo meno tipico inerente allo sviluppo. Per gli articoli riguardanti le abilità spaziali (44, 48) e la curiosità intellettuale (45, 46), approvazione maggiore corrisponde a sviluppo più avanzato.
| Campioni appaiati | Differenze accoppiate | T | DF | Sig. | ||||
| Significa | Deviazione standard | Errore standard Mean | 95% fiducia | |||||
| Intervallo di | ||||||||
| Inferiore | Superiore | |||||||
| Punteggio di riferimento Video 18m – | 2,91 | 4,38 | 0,37 | 2.17 | 3.64 | 7.79 | 137 | <.001 |
| Punteggio di riferimento Video 24m | ||||||||
| Punteggio totale di RSB 18m – | 4,30 | 6,48 | 0.55 | 3.21 | 5,40 | 7.80 | 137 | <.001 |
| Punteggio totale di 24m RSB | ||||||||
| 18 elementi di m non video – | 1.40 | 4,47 | 0,38 | 0.65 | 2.15 | 3,68 | 137 | <.001 |
| 24m non-video-articoli | ||||||||
Tabella 2: Differenze nei punteggi di riferimento Video valutazione di reciproco comportamento sociale (vrRSB) da 18 a 24 mesi
T-test accoppiato vengono utilizzati per calcolare le differenze tra punteggi alle 18 e 24 mesi (n = 138). Le differenze di punteggio sono per punteggi dei Video-referenziati, RSB punteggi totali e punteggi per gli elementi di cui si fa riferimento non video (Punteggio totale RSB - Video-a cui fa riferimento il punteggio). vrRSB indica a cui fa riferimento Video valutare di reciproco comportamento sociale. DF indica i gradi di libertà. Sig. indica il significato.
| Tipo Twin (coppie) | Video-referenziati | RSB totale |
| MZ (n = 54) | .928 (p <.001) | .912 (p <.001) |
| DZ (n = 95) | .388 (p <.001) | .218 (p <.001) |
| Maschio MZ (n = 28) | .894 (p <.001) | .914 (p <.001) |
| DZ maschio (n = 30) | .348 (p =.028) | .286 (p <.059) |
| MZ femminile (n = 26) | .956 (p <.001) | .878 (p <.001) |
| DZ femminile (n = 29) | .660 (p <.001) | .369 (p <.023) |
| Sesso opposto (n = 36) | .301 (p =.035) | .062 (p =,358) |
Tabella 3: Gemello-gemello concordanze per Toddler reciproco comportamento sociale a 18 mesi
Gemello-gemello concordanze [ICC(3,1)] per punteggi dei Video-referenziati e punteggi totali RSB a 18 mesi sono mostrati per monozigoti (MZ) e dizigoti (DZ). I valori vengono segnalati per tutte le coppie di gemelli MZ e DZ raggruppate insieme così come accoppiamenti gemellati analizzati separatamente per sesso. Sette coppie non classificate non erano in grado di essere inclusi in queste analisi.
| No-ASD (n = 310) | ASD (n = 14) | Differenza media | T | DF | Sig. | |
| Media (deviazione standard) | Media (deviazione standard) | |||||
| Video-referenziati | 12,77 (4,44) | 21,86 (8,09) | -9.08 | -4.17 | 13,36 | 0,001 |
| RSB totale | 21,84 (9.79) | 56.79 (28,17) | -34.95 | -4.63 | 13.14 | <.001 |
| Comunicazione sociale | ore 20.15 (8.14) | 44,57 (20,16) | -24.42 | -4.52 | 13.19 | 0,001 |
| Comportamento limitato, ripetitivo | 1.68 (2.76) | 12,21 (9,37) | -10.53 | -4,20 | 13.10 | 0,001 |
Tabella 4: Confronto dei punteggi di valutazione del reciproco comportamento sociale (vrRSB) Video-riferimento per i più piccoli con e senza disturbo dello spettro autistico (ASD)
Mezzi, dire le differenze e risultati di t-test per i punteggi di vrRSB sono indicati per il confronto dei punteggi tra gemelli senza una diagnosi ASD e un piccolo gruppo di bambini con ASD. SD indica la deviazione standard. DF indica i gradi di libertà. Sig. indica valori di p per coda 2 differenze significative.
Appendice 1: copia della scala di valutazione dei Video-referenziati di reciproco comportamento sociale Per favore clicca qui per scaricare questo file.
Discussion
Le analisi di esempio sopra dimostrano spiccate proprietà psicometriche di vrRSB come una misura quantitativa del bambino di RSB. Punteggi sul vrRSB ha mostrato diverse funzionalità analoga per il servizio SRS, una misura ben convalidata di RSB per anziani bambini3, tra cui continuo Punteggio ottenuto distribuzioni nella popolazione in generale, prova di ereditabilità e la capacità di distinguere bambini con e senza ASD (in test pilota per la vrRSB). gol di vrRSB a 18 e 24 mesi di età correlata con gol di SRS di 36 mesi, confermando che la caratteristica-come stabilità di RSB è misurabile nella prima infanzia. Così, la vrRSB rappresenta un'efficace estensione verso il basso di SRS e il primo strumento, a nostra conoscenza, per fornire una misura dimensionale di RSB quantificare le differenze individuali in genere e sviluppare in maniera atipica per i più piccoli. Questa capacità è in contrasto con vagli usati come la M-CHAT e CSBS, che adottano un approccio categorico al rischio di ASD o altri ritardi19,20 e non specificamente Indice RSB. Attuazione della vrRSB può migliorare la consegna efficiente dei primi interventi, facilitando la valutazione rapida del cambiamento nei sintomi ASD di nucleo, che possono mostrare una risposta distinta rispetto ad altre aree di danno in ASD, come funzione adattiva. Questo strumento ha anche il vantaggio di essere breve, accessibile e suscettibili di molteplici opzioni di amministrazione, tra cui l'opzione online completamente sviluppato in REDCap, che sono adatte per sia clinico e le impostazioni di ricerca. Oltre il Missouri popolazione di studio ha segnalato qui, il nostro team ha amministrato con successo questa indagine in un principalmente ispanico popolazione dei gemelli, con risultati comparabili psicometriche (dati non pubblicati, Harris, B., 2017). Questo strumento è così applicabile a diverse popolazioni e sarebbe facilmente suscettibile di traduzione in altre lingue, specialmente come interpretariato comportamento sociale di ancoraggio Punteggio non si basa sulla lingua parlata.
Abbiamo applicato due approcci per superare le sfide inerenti di badante reporting per RSB in bambini: un) adattando un sottoinsieme di elementi SRS che potrebbe essere fatta inerente allo sviluppo appropriato per i più piccoli e b) attuare un segnando videoregistrato ancoraggio per fornire un quadro di riferimento per le valutazioni di badante. Queste strategie consentito un punteggio di riferimento a Video che descrive la comunicazione sociale, un componente centrale di RSB e un più ampio punteggio totale RSB coprendo la comunicazione sociale e comportamento ripetitivo con restrizioni, i domini di sintomo di due core di ASD. Entrambe le partiture hanno dimostrato le proprietà di misura utile. Il Punteggio dei Video-referenziati, utilizzando un video di un bambino singolo riferimento a tutte le età di valutazione, è stato progettato per essere sensibile ai cambiamenti in RSB durante quasi, e di tutti i punteggi, ha mostrato la più grande dimensione dell'effetto di miglioramento in RSB da 18 a 24 mesi. Questo punteggio è stato anche più fortemente correlata con linguaggio espressivo di RSB Punteggio totale, coerente con lo stato attivo di questa scala sulla comunicazione sociale. Nel caso il punteggio totale di RSB, l'incorporazione di elementi SRS che rappresentano caratteri relazionati RSB e ASD è stato associato con più forte affidabilità test-retest e correlazioni superiore con punteggi totali di SRS 36 mesi; Queste osservazioni sono in armonia con la sensibilità migliorata dei punteggi dei Video-riferimento al cambiamento incrementale nella comunicazione sociale. Video-referenziati e concordanze di gemello-gemello monozigote alte punteggi totali RSB ha mostrati, che implica basso errore di misura e la forte affidabilità, pur confermando i risultati del test-retest buona affidabilità, che potrebbe essere suscettibile di sottovalutazione dato inerente allo sviluppo rapido cambiamento tra i 18 e i 24 mesi di età. Inoltre, in pilota, test, Video-referenziati e punteggi totali RSB distinto bambini con e senza ASD. La dimensione dell'effetto di questa differenza, mentre grande per entrambe le partiture, era leggermente maggiore per il punteggio totale di RSB, che massimizza l'opportunità di catturare variazione in tratti autistici attraverso un maggior numero di elementi e copertura di entrambi i domini ASD sintomo (vale a dire, comportamento ripetitivo limitato oltre alla comunicazione sociale). Tuttavia, una dimensione di forte effetto inoltre è stata osservata per il Punteggio Video-referenziati, suggerendo la sua redditività potenziale come una molto breve, quantitativa ASD screening misura nei bambini.
Un passo fondamentale per il successo di questo protocollo comporta la selezione appropriata di informatori, che deve avere sufficiente esperienza con il bambino per essere in grado di valutare il livello del bambino di RSB. Fin qui, abbiamo avuto successo con i genitori come informatori, anche se questa indagine è anche appropriata per altri operatori sanitari, come dei padri diurni o altri membri della famiglia che hanno frequenti contatti con il bambino (cioè, non meno di 6 ore o interagire con il bambino o guardando il bambino di interagire con gli altri il mese scorso). Partecipanti al sondaggio dovrebbero essere ricordati per guardare il video completo, in modo che l'ancoraggio notante fornisce uno standard uniforme di confronto tra valutatori ed è utile informare gli intervistati in anticipo per avere 15-20 minuti visualizzare il video e completare il questionario. Se l'indagine viene somministrato online, registra la quantità di tempo speso per l'indagine è utile per il controllo qualità, poiché i sondaggi completati troppo rapidamente sollevare preoccupazioni per la validità. Infine, poiché i passaggi multipli per segnare l'indagine forniscono un'opportunità per errore, si consiglia di utilizzare un punteggio automatizzato algoritmo e somme di controllo incrociato delle sottoscale con il punteggio totale.
Una limitazione del vrRSB è il potenziale per gli effetti di piano con gli elementi a cui fa riferimento video alle età maggiore, dato che per i più piccoli si avvicina 30 mesi sono probabilmente visualizzare comunicazione sociale più avanzato rispetto all'ancoraggio segnando 19 - mese-vecchio. Così, in età più avanzata, il punteggio totale di RSB è previsto per catturare più rappresentativi variazione in RSB. Inoltre, poiché l'ancoraggio Punteggio Visualizza comunicazione sociale forte capacità, alcuni operatori sanitari potrebbero essere inclinati per votare il loro bambino come simile all'ancoraggio notante in tutti gli elementi, piuttosto che considerare le differenze tra il bambino e l'ancoraggio. I nostri risultati, tra cui il Punteggio ampio distribuzioni e sensibilità dei punteggi dei video-riferimento al cambiamento inerente allo sviluppo, suggeriscono che questo non era un grosso problema in questo esempio; Tuttavia, le iterazioni successive del vrRSB possono esplorare l'uso di ancoraggi multipli segnando con diversi livelli di RSB, come pure d'inversione-notato elementi video-referenziati per verificare la coerenza concettuale delle risposte.
Orientamenti futuri includono test di vrRSB in grandi campioni di bambini con e senza ASD, per confermare le proprietà psicometriche della misura e per determinare l'entità a cui vrRSB punteggi predicono il rischio di ASD. Un campione più ampio faciliterà anche approcci di riduzione di dati per consentire il perfezionamento dello strumento rimuovendo tutti gli elementi con bassi contributi alla varianza in RSB. Dal punto di vista metodologico, la psicometria promettente del punteggio fatto riferimento Video supporta l'utilità generale di un ancoraggio del Punteggio dei video nel promuovere l'affidabilità e la validità di un valutazioni comportamentistiche. Un ancoraggio notante infantile plausibilmente potrebbe consentire ulteriormente al ribasso estensione di una misura RSB ai più giovani bambini e infanti, che potrebbero migliorare la tempestività di adire gli interventi precoci e ampliare la caratterizzazione sociale tipici ed atipici traiettorie dello sviluppo. In sintesi, il vrRSB offre importanti opportunità per migliorare la valutazione clinica del rischio ASD e risposta all'intervento. Capacità di vrRSB per rilevare la variazione dimensionale in RSB, modificare in RSB e influenze genetiche su RSB nella fase quando ASD emerge è anche importante per chiarire l'impatto iniziale di geni e ambiente su RSB, che può guidare trattamenti futuri per ASD e disturbi correlati.
Disclosures
J.N.C riceve canoni da Western servizi psicologici per la distribuzione commerciale di scala di reattività sociale (SRS), una misura quantitativa di tratti autistici per età 30 mesi fino all'età adulta. Gli autori restanti non hanno nulla a rivelare.
Acknowledgments
Questo progetto è stato sostenuto da borse di studio NICHD R01 HD068479 (J.N.C) e K08 MH112891-01 (N.M.), così come intellettuale e disabilità dello sviluppo Research Center presso l'Università di Washington (NIH/NICHD P30 HD062171, J.N.C PI). Ringraziamo tutte le famiglie che partecipano allo studio di sviluppo sociale reciproco iniziale per il loro generoso investimento di tempo e fatica. Ringraziamo il bambino che serve come l'ancoraggio notante videoregistrato e la sua famiglia per il suo contributo per la vrRSB. Ringraziamo Susan Vugteveen per la correzione del testo scritto e che figurano nel protocollo dei video.
Materials
| Name | Company | Catalog Number | Comments |
| Video-Referenced Rating of Reciprocal Social Behavior (vrRSB): hard copy version | n/a | n/a | pen-and-paper questionnaire consisting of 3-minute video clip and written questions |
| Online_vrRSB | n/a | n/a | REDcap xml file consisting of all items on the vrRSB and information for web link to video clip; this online version of the vrRSB must be administered in Redcap |
| REDCap software | Vanderbilt University | n/a | secure web application for creating and managing online surveys and databases; available at no cost to users from institutions which are members of the REDCap Consortium |
References
- Constantino, J. N., Przybeck, T., Friesen, D., Todd, R. D. Reciprocal social behavior in children with and without pervasive developmental disorders. J Dev Behav Pediatr. 21 (1), 2-11 (2000).
- American Psychiatric Association. Diagnostic and statistical manual of mental disorders, fifth edition. , fifth edition, Arlington, VA. (2013).
- Constantino, J. N. Social Responsiveness Scale. , 2nd Editions (SRS-2), Western Pscychological Services. Torrance, CA. (2013).
- Constantino, J. N., Hudziak, J. J., Todd, R. D. Deficits in reciprocal social behavior in male twins: evidence for a genetically independent domain of psychopathology. J Am Acad Child Adolesc Psychiatr. 42 (4), 458-467 (2003).
- Constantino, J. N., Todd, R. D. Genetic structure of reciprocal social behavior. Am J Psychiatry. 157 (12), 2043-2045 (2000).
- Constantino, J. N., et al. Developmental course of autistic social impairment in males. Dev Psychopathol. 21 (1), 127-138 (2009).
- Marrus, N., Underwood-Riordan, H., Randall, F., Zhang, Y., Constantino, J. N. Lack of effect of risperidone on core autistic symptoms: data from a longitudinal study. J Child Adolesc Psychopharmacol. 24 (9), 513-518 (2014).
- Constantino, J. N., Todd, R. D. Autistic traits in the general population: a twin study. Arch Gen Psychiatry. 60 (5), 524-530 (2003).
- Constantino, J. N., Zhang, Y., Frazier, T., Abbacchi, A. M., Law, P. Sibling recurrence and the genetic epidemiology of autism. Am J Psychiatry. 167 (11), 1349-1356 (2010).
- Lyall, K., et al. Parental social responsiveness and risk of autism spectrum disorder in offspring. JAMA Psychiatry. 71 (8), 936-942 (2014).
- Virkud, Y. V., Todd, R. D., Abbacchi, A. M., Zhang, Y., Constantino, J. N. Familial aggregation of quantitative autistic traits in multiplex versus simplex autism. Am J Med Genet B Neuropsychiatr Genet. 150B (3), 328-334 (2009).
- Marrus, N., et al. Rapid video-referenced ratings of reciprocal social behavior in toddlers: a twin study. J Child Psychol Psychiatry. 56 (12), 1338-1346 (2015).
- Bing, M. N., Whanger, J. C., Davison, H. K., VanHook, J. B. Incremental validity of the frame-of-reference effect in personality scale scores: a replication and extension. Journal of Applied Psychology. 89 (1), 150-157 (2004).
- Lievens, F., De Corte, W., Schollaert, E. A closer look at the frame-of-reference effect in personality scale scores and validity. J Appl Psychol. 93 (2), 268-279 (2008).
- Constantino, J. N., et al. The factor structure of autistic traits. J Child Psychol Psychiatry. 45 (4), 719-726 (2004).
- Frazier, T. W., et al. Confirmatory factor analytic structure and measurement invariance of quantitative autistic traits measured by the Social Responsiveness Scale-2. Autism. 18 (1), 31-44 (2014).
- Ozonoff, S., et al. A Prospective Study of the Emergence of Early Behavioral Signs of Autism. J Am Acad Child Adolesc Psychiatry. 49 (3), 256.e1-2-266.e1-2 (2010).
- Werner, E., Dawson, G. Validation of the phenomenon of autistic regression using home videotapes. Arch Gen Psychiatry. 62 (8), 889-895 (2005).
- Robins, D. L., Fein, D., Barton, M. L., Green, J. A. The Modified Checklist for Autism in Toddlers: an initial study investigating the early detection of autism and pervasive developmental disorders. J Autism Dev Disord. 31 (2), 131-144 (2001).
- Wetherby, A. M., Allen, L., Cleary, J., Kublin, K., Goldstein, H. Validity and Reliability of the Communication and Symbolic Behavior Scales Developmental Profile With Very Young Children. J Speech Lang Hear Res. 45 (6), 1202-1218 (2002).
- Lord, C., Rutter, M., DiLavore, P. C., Risi, S. Autism Diagnostic Observation Scale. , Western Psychological Services. Los Angeles. (2000).
- Wolff, J. J., Boyd, B. A., Elison, J. T. A quantitative measure of restricted and repetitive behaviors for early childhood. J Neurodev Disord. 8, 27 (2016).
- Missouri QuickFacts from the US Census Bureau. , Available from: https://www.census.gov/quickfacts (2013).
- Fenson, L., et al. Short-form versions of the MacArthur Communicative Development Inventories. Applied Psycholinguistics. 21, 95-116 (2000).
