Google'ın AI artık sesinizi korurken konuşmanızı çevirebilir

BM Genel Sekreteri Ban Ki-moon

BM Genel Sekreteri Ban Ki-moon'un çeviri cihazını dinlerken çekilmiş bir görüntüsüEMILIO MORENATTI / AP



Bu İspanyolca ses klibini dinleyin.

dünya gibi yeni gezegen keşfi





Geleneksel bir otomatik çeviri sisteminden geçirildiğinde İngilizce çevirisi bu şekilde görünebilir.

4 kollu adam

Şimdi, Google'ın yeni otomatik çeviri sisteminden geçirildiğinde kulağa böyle geliyor.



2 zamanlı araba motoru

Sonuçlar mükemmel değil, ancak Google'ın çevirmeninin orijinal konuşmacının sesini ve tonunu nasıl koruyabildiğini duyabilirsiniz. Bunu, ses girişini doğrudan ses çıkışına dönüştürdüğü için yapabilir. herhangi bir ara adım olmadan . Buna karşılık, geleneksel çeviri sistemleri sesi metne dönüştürür, metni çevirir ve ardından orijinal sesin özelliklerini kaybederek sesi yeniden sentezler.

Adı geçen yeni sistem, translatotron, hepsi konuşmacının ses spektrogramına bakan üç bileşene sahiptir - genellikle ses izi olarak adlandırılan ses çalarken kullanılan frekansların görsel bir anlık görüntüsü. İlk bileşen, giriş dilindeki ses spektrogramını çıkış dilindeki ses spektrogramıyla eşleştirmek için eğitilmiş bir sinir ağı kullanır. İkincisi, spektrogramı çalınabilecek bir ses dalgasına dönüştürür. Üçüncü bileşen daha sonra orijinal konuşmacının vokal özelliklerini nihai ses çıkışına geri katlayabilir.

Bu yaklaşım sadece önemli sözel olmayan ipuçlarını koruyarak daha incelikli çeviriler üretmekle kalmaz, aynı zamanda teoride çeviri hatasını da en aza indirmelidir, çünkü görevi daha az adıma indirger.



Translatotron şu anda bir kavram kanıtıdır. Test sırasında, araştırmacılar sistemi yalnızca İspanyolca'dan İngilizce'ye çeviri ile denediler, bu da zaten çok sayıda özenle seçilmiş eğitim verisi aldı. Ancak yukarıdaki klip gibi ses çıkışları, ileride ticari bir sistemin potansiyelini gösteriyor. Daha fazlasını dinleyebilirsiniz burada .

saklamak

Gerçek Teknolojiler

Kategori

Kategorize Edilmemiş

Teknoloji

Biyoteknoloji

Teknoloji Politikası

İklim Değişikliği

İnsan Ve Teknoloji

Silikon Vadisi

Bilgi Işlem

Mit Haber Dergisi

Yapay Zeka

Uzay

Akıllı Şehirler

Blok Zinciri

Özellik Hikayesi

Mezun Profili

Mezun Bağlantısı

Mit Haber Özelliği

1865

Benim Görüşüm

77 Toplu Cadde

77 Toplu Cad

Yazarla Tanışın

Cömertlik Içindeki Profiller

Kampüste Görüldü

Mezun Mektupları

Haberler

Seçim 2020

İle Indeksi

Kubbenin Altında

Yangın Hortumu

İle İndeks

Sonsuz Hikayeler

Pandemi Teknoloji Projesi

Başkandan

Kapak Hikayesi

Fotoğraf Galerisi

Tavsiye