Speech Studio'da söyleniş değerlendirmesi

Söyleniş değerlendirmesi, dil öğrencilerine öznel ve nesnel geri bildirim sağlamak için Konuşmayı metne dönüştürme özelliğini kullanır. Telaffuz alıştırması yapmak ve zamanında geri bildirim almak, dil becerilerini geliştirmek için gereklidir. Deneyimli öğretmenlerin yönlendirdiği değerlendirmeler çok zaman ve çaba alabilir ve öğrenciler için yüksek kaliteli bir değerlendirmeyi pahalı hale getirir. Söyleniş değerlendirmesi, dil değerlendirmesini tüm arka planlardan öğrenenler için daha ilgi çekici ve erişilebilir hale getirmeye yardımcı olabilir.

Not

Söyleniş değerlendirmesinin kullanılabilirliği hakkında bilgi için bkz . Desteklenen diller ve kullanılabilir bölgeler.

Bu makalede, Speech Studio aracılığıyla herhangi bir kod yazmadan söyleniş değerlendirme aracının nasıl kullanılacağı açıklanmaktadır. Söyleniş değerlendirmesini konuşma uygulamalarınızla tümleştirme hakkında bilgi için bkz . Telaffuz değerlendirmesini kullanma.

Speech Studio'daki söyleniş değerlendirme özelliği, doğruluk, akıcılık ve tamlık puanlarının temel puanlarına ek olarak, konuşma performansının ve anlaşılmasının çeşitli yönleri hakkında ayrıntılı geri bildirim sağlamak için daha kapsamlı puanlar içerir. İyileştirilmiş puanlar şunlardır: Prosody puanı, Sözlük puanı, Dil bilgisi puanı ve Konu puanı. Bu puanlar konuşma kullanımı, sözcük dağarcığı kullanımı, dil bilgisi doğruluğu ve konu anlama hakkında değerli içgörüler sunar.

Screenshot of overall pronunciation score and overall content score on Speech Studio.

Değerlendirme sonucunun en altında iki genel puan görüntülenir: Söyleniş puanı ve İçerik puanı. Okuma sekmesinde, Söyleniş Puanı'nın görüntülendiğini bulursunuz. Konuşma sekmesinde hem Söyleniş Puanı hem de İçerik Puanı görüntülenir.

Söyleniş Puanı: Bu puan, söyleniş kalitesinin toplu değerlendirmesini temsil eder ve dört alt değerlendirme içerir. Bu puanlar hem betikli hem de açıklanmamış değerlendirmeler için hem okuma hem de konuşma sekmelerinde kullanılabilir.

  • Doğruluk puanı: Söylenişin doğruluğunu değerlendirir.
  • Akıcılık puanı: Konuşmadaki yumuşaklık ve doğallık düzeyini ölçer.
  • Tamlık puanı: Doğru telaffuz edilen sözcük sayısını Düşünceler.
  • Prosody puanı: Uygun tonlama, ritim ve stres kullanımını değerlendirir. Prosody değerlendirmesiyle ilgili beklenmeyen kesme, Eksik kesme ve Monoton gibi birkaç hata türü daha kullanıma sunulmuştur. Bu hata türleri, önceki altyapıya kıyasla telaffuz hataları hakkında daha ayrıntılı bilgi sağlar.

İçerik Puanı: Bu puan, konuşma içeriğinin toplu bir değerlendirmesini sağlar ve üç alt değerlendirme içerir. Bu puan yalnızca açıklanmamış bir değerlendirme için konuşma sekmesinde kullanılabilir.

  • Kelime dağarcığı puanı: Konuşmacının sözcükleri etkili bir şekilde kullanmasını ve fikirleri doğru ifade etmek için verilen bağlam içindeki uygunluğunu ve sözcük karmaşıklığı düzeyini değerlendirir.
  • Dil bilgisi puanı: Dil bilgisi kullanımının doğruluğunu ve çeşitli cümle desenlerini değerlendirir. Sözcük doğruluğunu, dil bilgisi doğruluğunu ve cümle yapılarının çeşitliliğini dikkate alarak dil yeterliliğini daha kapsamlı bir şekilde değerlendirmeyi sağlar.
  • Konu puanı: Konuşmada ele alınan konuyu anlama ve katılım düzeyini değerlendirir. Konuşmacının, söz konusu konu ile ilgili düşünceleri ve fikirleri etkili bir şekilde ifade edebilme becerisini değerlendirir.

Bu genel puanlar, hem söyleniş hem de içeriğin kapsamlı bir değerlendirmesini sunarak, öğrencilerin konuşma performansı ve anlamalarının çeşitli yönleri hakkında değerli geri bildirimler sağlar. Dil öğrenenler, bu gelişmiş özellikleri kullanarak hem söyleniş hem de içerik ifadesinde iyileştirmeye yönelik avantajları ve alanları hakkında daha derin içgörüler elde edebilir.

Not

İçerik ve prosody değerlendirmeleri yalnızca en-US yerel ayarında kullanılabilir.

Fiyatlandırma

Temel olarak, söyleniş değerlendirmesinin kullanımı kullandıkça öde veya taahhüt katmanı fiyatlandırması için konuşmayı metne dönüştürmeyle aynıdır. Konuşmayı metne dönüştürme için bir taahhüt katmanı satın alırsanız söyleniş değerlendirmesi için harcama, taahhüdü karşılamaya gider.

Söyleniş değerlendirme özelliği ayrıca, temel konuşmayı metin fiyatına dahil etmeyen başka puanlar da sunar: prosody, dil bilgisi, konu ve sözlük. Bu puanlar, temel konuşmadan metin fiyatına kadar bir eklenti ücreti olarak kullanılabilir. Fiyatlandırma hakkında bilgi için bkz . Konuşmayı metne dönüştürme fiyatlandırması.

Aşağıda, betikli veya açıklanmamış değerlendirmelerde kullanılabilir olup olmadığı ve temel konuşmada metin fiyatına veya eklenti fiyatına dahil olup olmadığı gibi kullanılabilir söyleniş değerlendirme puanlarının yer aldığı bir tablo verilmiştir.

Puan Betikli veya açıklanmamış Temel konuşmada metin fiyatına dahil mi?
Doğruluk Betikli ve açıklanmamış Yes
Akıcı -lık Betikli ve açıklanmamış Yes
Bütünlüğü Komut dosyası Yes
Yanlış Bakım Betikli ve açıklanmamış Yes
Prozodi Betikli ve açıklanmamış Hayır
Dilbilgisi Yalnızca açıklanmamış Hayır
Konu Yalnızca açıklanmamış Hayır
Kelime Yalnızca açıklanmamış Hayır

Söyleniş değerlendirmeyi deneyin

Oturum açmadan bile söyleniş değerlendirmelerini keşfedebilir ve deneyebilirsiniz.

İpucu

Kendi betiğinizle 5 saniyeden fazla konuşma değerlendirmek için bir Azure hesabıyla oturum açın ve Konuşma kaynağınızı kullanın.

Söyleniş değerlendirmesinin ayrıntı düzeyi

Söyleniş değerlendirmesi, tek tek fonemlerden metin girişinin tamamına kadar farklı ayrıntı düzeyinde çeşitli değerlendirme sonuçları sağlar.

  • Tam metin düzeyinde, söyleniş değerlendirmesi ek Fluency, Completeness ve Prosody puanları sunar: Akıcılık, konuşmanın yerel konuşmacının sözcükler arasında sessiz sonlar kullanmasıyla ne kadar yakın olduğunu gösterir; Tamlık, konuşmada başvuru metni girişine kaç sözcüğün telaffuz edildiğini gösterir; Prosody, konuşmacının konuşmalarında doğallık, ifade ve genel prosody öğelerini ne kadar iyi aktardığı gösterir. Daha sonra verilen konuşmanın genel söyleniş kalitesini belirtmek için Doğruluk, Akıcılık, Tamlık ve Prosody'den toplanan genel bir puan verilir. Söyleniş değerlendirmesi ayrıca tam metin düzeyinde içerik puanı (Sözlük, Dil Bilgisi ve Konu) sunar.
  • Sözcük düzeyinde, söyleniş değerlendirmesi yanlışları otomatik olarak algılayabilir ve aynı anda doğruluk puanı sağlayabilir ve bu da verilen konuşmada atlama, yineleme, eklemeler ve yanlış telaffuz hakkında daha ayrıntılı bilgi sağlar.
  • Hece düzeyinde doğruluk puanları şu anda JSON dosyası veya Konuşma SDK'sı aracılığıyla kullanılabilir.
  • Phoneme düzeyinde, söyleniş değerlendirmesi her phoneme'nin doğruluk puanlarını sağlayarak öğrencilerin konuşmalarının telaffuz ayrıntılarını daha iyi anlamasına yardımcı olur.

Okuma ve konuşma senaryoları

Söyleniş değerlendirmesi için iki senaryo vardır: Okuma ve Konuşma.

  • Okuma: Bu senaryo betikli değerlendirme için tasarlanmıştır. Bu, öğrencilerin belirli bir metni okumasını gerektirir. Başvuru metni önceden sağlanır.
  • Konuşma: Bu senaryo açıklanmamış değerlendirme için tasarlanmıştır. Bu, öğrencilerin belirli bir konuda konuşmasını gerektirir. Başvuru metni önceden sağlanmadı.

Betikli değerlendirme gerçekleştirme

Başvuru metninin söylenişini değerlendirmek için şu adımları izleyin:

  1. Speech Studio'da Söyleniş Değerlendirmesi'negidin.

    Screenshot of how to go to Pronunciation Assessment on Speech Studio.

  2. Okuma sekmesinde, söylenişi değerlendirmek istediğiniz desteklenen bir dil seçin.

    Screenshot of choosing a supported language on reading tab that you want to evaluate the pronunciation.

  3. Sağlanan metin örneklerini kullanabilir veya kendi betiğinizi girebilirsiniz.

    Metni okurken, kaydedilen sesin çok düşük olmadığından emin olmak için mikrofona yakın olmanız gerekir.

    Screenshot of where to record audio with a microphone on reading tab.

    Aksi takdirde, telaffuz değerlendirmesi için kayıtlı sesi karşıya yükleyebilirsiniz. Başarıyla karşıya yüklendikten sonra ses, aşağıdaki ekran görüntüsünde gösterildiği gibi sistem tarafından otomatik olarak değerlendirilir.

    Screenshot of uploading recorded audio to be assessed.

Açıklanmamış değerlendirme gerçekleştirme

Açıklanmamış bir değerlendirme yapmak istiyorsanız Konuşma sekmesini seçin. Bu özellik, önceden başvuru metni sağlamadan açıklanmamış değerlendirme gerçekleştirmenizi sağlar. Şu şekilde ilerleyin:

  1. Speech Studio'da Söyleniş Değerlendirmesi'negidin.

  2. Konuşma sekmesinde, söylenişi değerlendirmek istediğiniz desteklenen bir dil seçin.

    Screenshot of choosing a supported language on speaking tab that you want to evaluate the pronunciation.

  3. Ardından, sağlanan örnek konu başlıklarından birini seçebilir veya kendi konunuzu girebilirsiniz. Bu seçenek, önceden tanımlanmış bir betik olmadan belirli bir konuda konuşma yeteneğinizi değerlendirmenizi sağlar.

    Screenshot of inputting a topic on speaking tab to assess your ability to speak on a given subject without a predefined script.

    Söyleniş değerlendirmesi için konuşmanızı kaydederken, kayıt sürenizin önerilen 15 saniye (50 sözcükten fazla sözcükle eşdeğer) ile 10 dakika arasında olduğundan emin olmak önemlidir. Bu zaman aralığı, konuşmanızın içeriğini doğru bir şekilde değerlendirmek için idealdir. Konu puanı almak için, konuşulan sesinizin en az üç cümle içermesi gerekir.

    Ayrıca, telaffuz değerlendirmesi için kayıtlı sesi karşıya yükleyebilirsiniz. Başarıyla karşıya yüklendikten sonra ses sistem tarafından otomatik olarak değerlendirilir.

Söyleniş değerlendirme sonuçları

Konuşmanızı kaydettikten veya kaydedilen sesi karşıya yükledikten sonra Değerlendirme sonucu çıkış olur. Sonuç, sesli konuşmanızı ve konuşma değerlendirmenizle ilgili geri bildirimleri içerir. Sesli sesinizi dinleyebilir ve gerekirse indirebilirsiniz.

JSON'da söyleniş değerlendirme sonucunu da kontrol edebilirsiniz. Sözcük düzeyi, hece düzeyi ve fone düzeyi doğruluk puanları JSON dosyasına eklenir.

Screenshot of showing the assessment result on the display window, which includes transcript and feedback on your speech.

Tam transkripsiyon Görüntü penceresinde gösterilir. Sözcük, hata türüne göre vurgulanır. Söyleniş değerlendirmesindeki hata türleri farklı renkler kullanılarak temsil edilir. Bu görsel ayrım, belirli hataları tanımlamayı ve çözümlemeyi kolaylaştırır. Konuşulan sesteki hata türlerine ve sıklıklara net bir genel bakış sunarak iyileştirme gerektiren alanlara odaklanmanıza yardımcı olur. Belirli hata türlerine odaklanmak veya belirli türleri ekrandan dışlamak için her hata türünü açıp kapatabilirsiniz. Bu özellik, sesli sesinizdeki hataları gözden geçirme ve analiz etme konusunda esneklik sağlar. Her sözcüğün üzerine geldiğinizde, sözcüğün tamamı veya belirli fonemler için doğruluk puanlarını görebilirsiniz.

Değerlendirme sonucunun en altında puanlama sonuçları görüntülenir. Betikli telaffuz değerlendirmesi için yalnızca telaffuz puanı (doğruluk puanı, akıcılık puanı, tamlık puanı ve prosody puanı dahil) sağlanır. Açıklanmamış telaffuz değerlendirmesi için hem telaffuz puanı (doğruluk puanı, akıcılık puanı ve prosody puanı dahil) hem de içerik puanı (sözlük puanı, dil bilgisi puanı ve konu puanı dahil) görüntülenir.

Akış modunda değerlendirme puanları

Söyleniş Değerlendirmesi kesintisiz akış modunu destekler. Speech Studio tanıtımı, değerlendirme için akış modunda 60 dakikaya kadar kayıt yapılmasını sağlar. Kaydı durdur düğmesine basmadığınız sürece değerlendirme işlemi tamamlanmaz ve değerlendirmeyi rahatça duraklatabilir ve sürdürebilirsiniz.

Söyleniş Değerlendirmesi söylenişin çeşitli yönlerini değerlendirir. Değerlendirme sonucunun en altında, Söyleniş puanını toplam toplam puan olarak görebilirsiniz; bu puan 4 alt yönü içerir: Doğruluk puanı, Akıcılık puanı, Tamlık puanı ve Prosody puanı. Akış modunda Doğruluk puanı, Akıcılık puanı ve Prosody puanı kayıt işlemi boyunca zaman içinde değişeceğinden, değerlendirmenin sonundan önce yaklaşık genel puanı artımlı olarak görüntülemek için Speech Studio'da bir yaklaşım gösteririz. Bu yaklaşım yalnızca Doğruluk puanı, Akıcılık puanı ve Prosody puanı ile ağırlıklıdır. Tamlık puanı yalnızca durdurma düğmesine bastıktan sonra değerlendirmenin sonunda hesaplanır, dolayısıyla son söyleniş genel puanı Doğruluk puanı, Akıcılık puanı, Tamlık puanı ve Prosody puanı ağırlıkla toplanır.

Akış modunda söylenişi değerlendirme işleminin tamamı için aşağıdaki tanıtım örneklerine bakın.

Kaydı başlat

Kaydetmeye başladığınızda, alttaki puanlar 0'dan değişmeye başlar.

Screenshot of overall assessment scores when starting to record.

Kayıt sırasında

Uzun bir paragraf kaydederken, kaydı istediğiniz zaman duraklatabilirsiniz. Durdur düğmesine basmadığınız sürece kaydınızı değerlendirmeye devam edebilirsiniz.

Screenshot of overall assessment scores when recording.

Kaydı bitir

Durdur düğmesine bastıktan sonra, en altta Söyleniş puanı, Doğruluk puanı, Akıcılık puanı, Tamlık puanı ve Prosody puanı görebilirsiniz.

Screenshot of overall assessment scores after recording.

Sorumlu AI

Yapay zeka sistemi yalnızca teknolojiyi değil, onu kullanan kişileri, bundan etkilenecek kişileri ve dağıtıldığı ortamı da içerir. Sistemlerinizde sorumlu yapay zeka kullanımı ve dağıtımı hakkında bilgi edinmek için saydamlık notlarını okuyun.

Sonraki adımlar

  • Konuşma SDK'sı ile söyleniş değerlendirmesini kullanma
  • Kullanım örnekleri hakkındaki blogu okuyun