Microsoft VALL-E 2: Yapay zeka ses taklidi artık ayırt edilemez seviyede
  1. Anasayfa
  2. Haberler

Microsoft VALL-E 2: Yapay zeka ses taklidi artık ayırt edilemez seviyede

0
Microsoft, geçtiğimiz yılın nisan ayında insan seslerini taklit edebilen metinden konuşmaya yapay zeka aracı VALL-E’yi tanıtmıştı. O devirde VALL-E, çok kısa bir ses örneğinden sonra her türlü sesi taklit edebiliyordu. Fakat yeni duyurulan VALL-E 2, her sesi inanılmaz yüksek kalitede taklit edebiliyor. Bu yüzden Microsoft, VALL-E 2‘yi kamuoyuna sunulamayacak kadar ikna edici örnekler ürettiği için yayınlamama kararı aldı.

Microsoft VALL-E 2 korkutuyor

Daha evvel de metinden konuşmaya (text-to-speech – TTS) yapay zeka araçları görmüştük fakat VALL-E 2, birinci sefer karşılaştırma ölçütlerinde beşerlerle tıpkı düzeye ulaşan tipinin tek örneği oluyor. Bu da modelin çok gerçekçi ses taklitleri yapabildiği manasına geliyor. Microsoft’un VALL-E 2’yi halka açık bir biçimde yayınlamama nedeni de aslında bu. Aşağıdaki irtibattan bir örneğe bakabilirsiniz. Ayrıyeten Microsoft’un kendi sitesindeki örneklere de bakmanızı tavsiye ederiz.

VALL-E 2 ile tek bir ses evrakıyla yapılan birinci denemede modelin insan düzeyinde performans gösterdiği belirtiliyor. Bununla birlikte VALL-E 2, karmaşıklığı yahut tekrar eden sözleri nedeniyle klâsik olarak sıkıntı olan cümlelerde bile konuşma sentezini bozmuyor. VALL-E 2 temelinde birinci modelin üzerine inşa ediliyor lakin iki ehemmiyeti geliştirmeyle destekleniyor: “Tekrara Hassas Örnekleme” ve “Gruplandırılmış Kod Modelleme“.

Birincisi, kod çözme süreci sırasında seslerin yahut cümlelerin sonsuz döngülerini önleyen “belirteçlerin” (token) tekrarlarını ele alarak yapay zekanın metni konuşmaya dönüştürme halini geliştiriyor. Daha anlaşılır bir sözle, bu özellik VALL-E 2’nin konuşma halini değiştirmeye yardımcı olarak daha akıcı ve doğal görünmesini sağlıyor.
Gruplandırılmış Kod Modelleme ise dizi uzunluğunu ya da modelin tek bir giriş dizisinde tek tek işlediği belirteçlerin sayısını azaltarak verimliliği artırıyor. Böylelikle VALL-E 2’nin konuşma üretme suratı artırılıyor ve uzun ses evrakları işlenirken ortaya çıkan zorlukların önüne geçiliyor.

LibriSpeech ve VCTK data kümelerini kullanarak test edilen VALL-E 2 için araştırmacılar, konuşma sağlamlığı, doğallık ve konuşma benzerliği açısından evvelki TTS sistemlerinin geride bırakıldığını söyledi.

Microsoft, sahip olduğu yeteneklere karşın potansiyel berbata kullanım riskleri nedeniyle VALL-E 2’yi halka sunmayacak. Ses klonlama ve deepfake teknolojisinin son derece erişilebilir olduğu düşünüldüğünde bu, yerinde bir karar. OpenAI üzere başka yapay zeka şirketleri de kendi ses teknolojilerine benzeri kısıtlamalar uyguluyor.

Reaksiyon Göster
  • 0
    alk_
    Alkış
  • 0
    be_enmedim
    Beğenmedim
  • 0
    sevdim
    Sevdim
  • 0
    _z_c_
    Üzücü
  • 0
    _a_rd_m
    Şaşırdım
  • 0
    k_zd_m
    Kızdım

info@teknovivo.com

Yazarın Profili
Paylaş

E-posta adresiniz yayınlanmayacak. Gerekli alanlar * ile işaretlenmişlerdir