İnsan denekleri içeren tüm yöntemler, kurumsal yönergelere uygun olarak yürütülmüş ve Hanshan Normal Üniversitesi'nin kurumsal inceleme kurulu (IRB) veya insan araştırma etik komitesi tarafından onaylanmıştır. Deney öncesinde tüm katılımcılardan bilgilendirilmiş onam alınmıştır.
Kavramsal çerçeve ve araştırma tasarımı
Bu çalışma, izleyici tarafından oluşturulan danmu yorumlarının altyazı çevirisini nasıl etkilediğini incelemek için yardımcı bir söylem katmanı içeren bir süreç-ürün araştırma tasarımı kullanmıştır. Analitik çerçeve; metinsel özellikleri, çeviri sürecinin göstergelerini ve çeviri kalitesi sonuçlarını entegre etmiştir. Spesifik olarak çalışma, danmu yoğunluğu ile yansıtılan izleyici dikkatinin, çevirmenlerin bilişsel kaynaklarını belirli metinsel özelliklere yönlendirip yönlendirmediğini ve bu dikkat dağılımının daha sonra çeviri kalitesini etkileyip etkilemediğini araştırmıştır.
Bu çerçeveyi işlevsel hale getirmek için çalışma öncelikle dört boyuta dayalı segment düzeyinde metinsel özellikler belirlemiştir: kültürel yük, değerlendirme yoğunluğu, anlatı sıkıştırması ve danmu belirginliği. Kültürel yük, adaptasyon veya açıklama gerektiren kültüre özgü referansların varlığını ifade etmektedir. Değerlendirme yoğunluğu, bir segment içindeki duygusal veya tutumsal yüklü dilin konsantrasyonunu ölçmüştür. Anlatı sıkıştırması, anlamsal içeriğin altyazı kısıtlamaları altında ne derece yoğunlaştırıldığını kapsamıştır. Danmu belirginliği, senkronize danmu yorumlarının hacmiyle nicelendirilen, izleyici dikkatinin her bir altyazı segmentine yönelme derecesini temsil etmiştir. Geleneksel çeviri zorluğu ölçümlerinin aksine, danmu belirginliği metinsel karmaşıklığın kendisinden ziyade sosyal olarak dağılmış dikkati yansıtmıştır. Yaygın izleyici etkileşimi alan bir segmentin çevirisinin mutlaka daha zor olduğu anlamına gelmez; aksine bu durum, izleme deneyimi içinde iletişimsel önemin arttığı bir noktayı temsil etmektedir.
Analitik çerçeve, birbirine bağlı üç veri kümesinden oluşmaktaydı. Katılımcı düzeyindeki veri kümesi, bireysel demografik özellikleri ve çeviri uzmanlığını içermekteydi. Süreç-ürün veri kümesi, her bir altyazı segmentini tuş vuruşu günlüğünden elde edilen davranışsal göstergelere ve uzman çeviri kalitesi değerlendirmelerine bağlamaktaydı. Danmu veri kümesi, altyazı zamanlamasıyla senkronize edilmiş izleyici yorumlarını içeriyor ve danmu belirginlik değerleri buradan hesaplanıyordu. Bu veri kümeleri katılımcı ve segment tanımlayıcıları aracılığıyla ilişkilendirilmiş; böylece çevrilmiş her bir altyazı segmentinin çevirmen özellikleri, bilişsel işlemleme davranışı, izleyici dikkati ve çeviri sonuçları ile eş zamanlı analizi mümkün kılınmıştır. Nihai entegre veri tabanı, 216 tam çeviri oturumu ve 3.168 katılımcı-metin-segment gözlemi ile oluşturularak sonraki süreç-ürün analizleri için ampirik temel sağlamıştır.
Katılımcı taraması ve geçmiş profil oluşturma
Örneklem, güney Çin'deki bir devlet üniversitesinden seçilen ve lisans eğitiminin ikinci, üçüncü ve dördüncü yıllarına eşit şekilde dağılmış (her yıl grubu için 24 katılımcı) 72 İngilizce bölüm öğrencisinden oluşmuştur. Tüm katılımcılar, İngilizce yazma ve çeviri konusunda resmi eğitim alan anadili Çince olan kişilerdir. Çevirmen adayı popülasyonu içinde karşılaştırılabilirliği sağlamak amacıyla, İngilizce konuşulan bir ülkede 6 aydan fazla ikamet etmiş veya profesyonel çevirmen sertifikasına sahip olan kişiler kapsam dışı bırakılmıştır. Katılımcılar; çeviri deneyimi, kültürel aşinalık veya ikinci dil yeterliliğine göre ayrı deneysel gruplara ayrılmamıştır. Bunun yerine; sınıf düzeyi, güncel İngilizce yeterlilik sınav puanları, önceki çeviri dersleri, Çin ile ilgili kültürel konulara yönelik öz-değerlendirme aşinalığı ve haftalık ortalama iki dilli pratik süresi kaydedilmiş ve istatistiksel modellere katılımcı düzeyinde kovaryatlar olarak dahil edilmiştir. Bu açıklama, hakem değerlendirmesi sırasında dile getirilen katılımcı sayısı tutarsızlığını da gidermektedir: hem makale hem de replikasyon veri seti 72 katılımcı, 216 görev oturumu ve 3.168 segment düzeyinde gözlem içermektedir.
Kaynak metin seçimi ve görev oluşturma
Çeviri materyalleri, telif haklarıyla korunan materyallerin yeniden kullanımından kaçınmak ve gerçek kamu söylemini yansıtmak amacıyla özel olarak bu çalışma için geliştirilen, çağdaş Çin odaklı üç anlatı metninden oluşmaktaydı. Her bir metin 205–225 Çince karakter içermekte ancak içsel özellikleri bakımından sistematik olarak farklılık göstermekteydi. Metin A, orta düzeyde kültürel yükü ve nispeten basit sözdizimi olan bir Bahar Bayramı eve dönüş anlatısı sunmaktadır. Metin B, bir Ejderha Kayığı Bayramı anısını anlatmakta olup, kültüre özgü ifadelerin ve örtük arka plan bilgisinin daha yoğun olduğu bir yapıya sahiptir. Metin C ise yoğun değerlendirme dili ve sıkıştırılmış anlatı konumlandırmasıyla karakterize edilen, kırsal bölgelerdeki canlı yayıncılık ve e-ticaretle ilgili bir anlatıyı betimlemektedir.
Metinler önce yan cümle sınırları, ardından anlam birimi sınırları kullanılarak sistematik olarak bölümlere ayrılmış ve üç çeviri görevi boyunca analiz edilebilir 44 birim elde edilmiştir (Tablo 1). Resmi kodlamadan önce, bir kodlama kılavuzu ile kültürel yük, değerlendirme yoğunluğu ve anlatı sıkıştırması 1–5'lik sıralı ölçekler kullanılarak tanımlanmıştır. Ana deneye katılmayan 12 öğrencinin yer aldığı bir pilot çalışma; hedeflenen zorluk kalibrasyonunu, görev talimatlarının netliğini ve tuş vuruşu hizalaması için bölüm sınırlarının stabilitesini doğrulamıştır.
Yardımcı korpus oluşturma ve belirginlik haritalama
Kamuoyunda belirgin olan anlatı ipuçlarını belirlemek amacıyla, Ocak 2023 ile Aralık 2025 tarihleri arasında yüklenen 24 Bilibili videosundan yardımcı bir danmu korpusu derlenmiştir. Videolar; yalnızca kaynak metinlerde temsil edilen üç semantik alanın birine uyması, 50.000'den fazla görüntüleme sayısına ulaşmış olması, yoğun danmu etkileşimi içermesi ve zamanla senkronize edilmiş yorumların dışa aktarımına ve tematik eşlemesine izin vermesi durumunda dahil edilmiştir. Yinelenenlerin kaldırılması ile emojilerin, yansıma sözcüklerin ve ilgisiz parçaların filtrelenmesinin ardından, nihai korpus 18.642 yorumdan oluşmuştur.
İçerik sözcükleri, kaynak metinle ilişkili anahtar sözcük çapaları kullanılarak standartlaştırıldı ve kümelendi. Ardından, her bir kaynak metin segmentine; normalize edilmiş anahtar sözcük-küme frekansının, ilgili tematik küme içindeki yorum konsantrasyonunun ve ortalama değerlendirme yoğunluğunun ağırlıklı bir bileşimine dayalı olarak sürekli bir danmu belirginlik puanı atandı. Bu prosedür, çevirmen işlem çabası ile izleyici belirginliği arasındaki karşılaştırmaların, doğrudan sözcük eşleştirmesi yerine anlamsal-küme düzeyinde yapılmasına olanak tanır. Danmu, deneysel çeviri görevinin kendisinden ziyade çevrimiçi videolara verilen izleyici tepkilerini yansıttığı için, danmu belirginliği, bir kaynak segmentin dilbilimsel zorluğunun doğrudan bir kanıtı olarak değil, izleyici etkileşiminin harici bir göstergesi olarak yorumlanmıştır.
Deneysel prosedür ve veri yakalama
Çeviri oturumları, standart donanım, yazılım ve internet erişim koşulları altında, kontrollü bir bilgisayar laboratuvarında bireysel olarak gerçekleştirilmiştir (Şekil 2). Uluslararası bir kitle için okunabilir İngilizce üretimine vurgu yapan beş dakikalık bir oryantasyonun ardından, katılımcılar klavyeye alışma etkilerini en aza indirmek için üç dakikalık bir İngilizce yazma ısınma çalışması tamamlamıştır. Üç çeviri görevi, Translog-II kullanılarak sıralı olarak uygulanmış; olası yorgunluk ve sıra etkilerini katılımcılar arasında eşit şekilde dağıtmak için görev sırası Latin karesi tasarımına göre dengelenmiştir. Katılımcılara, beşer dakikalık dinlenme aralıklarıyla ayrılmış, her metin için maksimum 20 dakika süre verilmiştir.
Yerleşik iki dilli sözlüğe izin verilmiş olsa da, makine çevirisi sistemleri ve harici arama motorları yasaklanmıştır. Tüm tuş vuruşları, duraklamalar ve imleç hareketleri otomatik olarak kaydedilmiş ve doğrusal olmayan revizyon bölümlerini doğrulamak için senkronize ekran kayıtlarıyla desteklenmiştir. Katılımcılar, her görevi tamamladıktan sonra, yalnızca sınırda kalan kodlama durumlarının yorumlanmasına yardımcı olmak amacıyla kullanılan, öz bildirime dayalı bir zorluk değerlendirmesi yapmışlardır.
Süreç ölçümü ve değişken kodlama
Tuş vuruşu kayıtları, önceden tanımlanmış segment yapısıyla hizalandı. Bir hizalama epizodu, bir segmente karşılık gelen ilk hedef dil tuş vuruşuyla başladı ve katılımcı kesin olarak bir sonraki segmente geçtiğinde sona erdi. Üst üste binen revizyonlar, zaman damgalı imleç izleme kayıtları kullanılarak yeniden atandı.
Karar verme davranışı beş gösterge kullanılarak ölçülmüştür: ilk segment çevirisi öncesindeki ilk duraklama süresi, segment içi ortalama duraklama süresi, iki saniyeyi aşan duraklamaların sıklığı, sözlük danışma sayıları ve doğrusal taslaktan sapmaları gösteren imleç tabanlı kesinti sayıları (Tablo 2). Revizyon davranışı iki boyutta sınıflandırılmıştır: zamanlama ve işlev. Zamanlama, anlık yerel revizyonları, taslağın mevcut segmentin ötesine ilerlemiş olduğu durumlarda gerçekleştirilen gecikmiş revizyonlardan ayırmıştır. İşlevsel kodlama, revizyonları yüzeysel revizyonlar (anlamsal değişiklik içermeyen biçim düzeyindeki düzeltmeler), anlam revizyonları (leksikal veya sentaktik değişiklikler), söylem düzeyindeki revizyonlar (yan cümlecik ilişkileri veya tutarlılığa yönelik düzenlemeler) ve kültürel adaptasyon revizyonları (hedef kitle odaklı yeniden formülasyonlar) olarak sınıflandırmıştır. İki eğitimli kodlayıcı, her revizyon bölümünü hakem değerlendirmesi öncesinde bağımsız olarak analiz etmiş ve her olay için tek bir birincil işlevsel kategori atamıştır. Değerlendiriciler arası güvenilirlik, kodlanan tüm ölçümlerde güçlü çıkmıştır. Cohen’s ĸ, revizyon işlevlerinin kategorik kodlaması için önemli düzeyde uyuma işaret etmiştir (ĸ = 0.84, p < 0.001). Sıralı metin düzeyi değişkenler için, sınıfiçi korelasyon katsayıları (ICC, iki yönlü karma etkiler modeli, mutlak uyum), kültürel yük (ICC = 0.86), değerlendirme yoğunluğu (ICC = 0.78) ve anlatı sıkıştırması (ICC = 0.82) için yüksek güvenilirlik göstermiştir. Başlangıçtaki tüm kodlama tutarsızlıkları daha sonra ortak hakem değerlendirmesi yoluyla çözümlenmiştir.
Çeviri kalitesinin değerlendirilmesi
Çeviri kalitesi, doktora düzeyinde eğitime ve çeviri öğretimi konusunda geniş deneyime sahip iki değerlendirici tarafından süreç verilerinden bağımsız olarak değerlendirilmiştir. Katılımcı kimliklerine ve süreç ölçümlerine karşı körleme uygulanan değerlendiriciler; anlamsal doğruluk, dilsel akıcılık, anlatı tutarlılığı, kültürel aktarım ve üslup uygunluğu olmak üzere beş boyuta eşit olarak dağıtılmış 100 puanlık bir rubrik uygulamışlardır (Tablo 3). Sekiz puandan fazla olan puanlama farklılıkları, ortak inceleme ve uzlaşıyla yeniden puanlamayı tetiklemiş ve hakem karar neticesinde belirlenen ortalama, final çeviri kalitesi puanı olarak kullanılmıştır. Değerlendirici sonrası puanlama kayıtları, replikasyon materyallerinde değerlendiriciler arası güvenilirliğin şeffaf bir şekilde raporlanmasını kolaylaştırmak amacıyla saklanmıştır.
İstatistiksel modelleme
Analizler üç ardışık aşamada gerçekleştirilmiştir. İlk olarak, tüm değişkenleri yıl grupları ve metin türleri genelinde özetlemek için tanımlayıcı istatistikler hesaplanmıştır. İkinci olarak, bölümlerin metinler içindeki iç içe geçmiş yapısını ve bireysel katılımcılardan gelen tekrarlı gözlemleri hesaba katmak amacıyla, karma etkili regresyon modelleri kullanılarak bölüm düzeyindeki işlem çabası analiz edilmiştir. İlk duraklama süresi ve revizyon sıklığı dahil olmak üzere bağımlı değişkenler; katılımcı yeterliliği kontrol altında tutulurken kültürel yük, değerlendirme yoğunluğu, anlatı sıkıştırması ve danmu belirginliğinin fonksiyonları olarak modellenmiştir. İstatistiksel şeffaflığı artırmak için tahmin edici korelasyonları, varyans şişirme tanıları, %95 güven aralıkları, etki büyüklüğü tahminleri ve model uyum indeksleri eklenmiştir.
Son olarak, revizyon zamanlamasının ve revizyon işlevinin toplam revizyon sıklığına kıyasla öngörücü katkılarını değerlendirmek için çeviri kalitesi modellenmiştir. Danmu-belirgin segmentler ile yüksek çaba gerektiren çeviri segmentleri arasındaki örtüşme; her bir dağılımın üst beşte birliği, standartlaştırılmış bir bileşik çaba indeksi ve rastgele örtüşme analizi kullanılarak değerlendirilmiştir. Herhangi bir açıklayıcı faktör analizi veya yapısal eşitlik modellemesi gerçekleştirilmemiştir. Buna bağlı olarak, ekteki şekiller yalnızca kavramsal, tanımlayıcı veya regresyon tabanlı özetler olarak sunulmuştur.