Tencent, konuşma sürerken çeviri yapan Hy-SimulMT ağırlıklarını açtı
Tencent’in Hunyuan ekibi, konuşma sürerken Çince ile İngilizce arasında çeviri yapan Hy-SimulMT modelinin ağırlıklarını yayımladı. Model çevrilmiş metin üretiyor; sesli çıktı ve konuşmacının sesini benzetme için ayrı bir ses üretim hizmeti gerekiyor. Çalıştırma ve eğitim araçları da sunuluyor. Açıklanan karşılaştırmalar Tencent’in kendi değerlendirmelerine dayanıyor; başka konuşma dilleri için destek belgelenmiş değil.
Yapay Zekâ··Sabah
Konuşma sürerken çevrilmiş metin üretiliyor
Tencent’in yapay zekâ geliştiren Hunyuan ekibi, Çince ile İngilizce arasında eşzamanlı çeviri yapan Hy-SimulMT modelinin ağırlıklarını yayımladı. Model, gelen sesi işlerken konuşmacının cümleyi bitirmesini beklemeden çevrilmiş metin üretiyor. Temel sürüm yalnızca çeviriyi veriyor. Interleave adlı sürümde ise tanınan kaynak metinle çeviri birlikte sunuluyor. İndirilebilir ağırlıklar Apache-2.0 lisansıyla paylaşılıyor. Belgelenen sesli girdi desteği, Çince ve İngilizce arasındaki iki yönlü çeviriyi kapsıyor.[1], [2]
Sesli çıktı için ayrı bir hizmet gerekiyor
Modelin kendisi metin üretiyor. Çeviriyi seslendirmek veya konuşmacının sesini benzetmek için ayrıca metinden ses üreten bir hizmet kurulması gerekiyor. Beraberinde sunulan SimulInfer, modeli çalıştıran hizmeti ve internet arayüzünü sağlıyor; ses dosyası yüklemeyi ve mikrofon girişini kabul ediyor. SimulTrain ise eğitim araçlarını içeriyor. Teknik anlatımda uzman karışımı adı verilen bir yapı tanımlanıyor. Bu yapıda her girdiyi işlerken modelin bütün parçaları yerine seçilen bölümleri çalışıyor.[1], [2]
Yerel çalıştırma desteğinde tamamlanmamış adımlar var
GGUF model dosyalarını çalıştıracak destek, yerel çıkarım yazılımı llama.cpp’nin ana deposuna henüz alınmış değil. Depo üstverisinde bulunan daha geniş dil listesi, diğer dillerdeki konuşmaların da çevrilebildiğini kanıtlamıyor. Tencent’in açıkladığı karşılaştırmalar, çeviri sınamalarına ve profesyonel çevirmenlerin yorumladığı küçük bir ses kümesine dayanıyor. Yayımlanan modelin çeviri başarımına ilişkin bu sonuçlar, bağımsız ölçümler yerine üreticinin kendi değerlendirmeleri olarak aktarılıyor.[1], [2]
