Eigen RadarYapay Zekâ
Analiz

Voxtral 3, canlı görüşmeleri araç kullanımına bağladı

Mistral, konuşmayı çözümleme, akıl yürütme, araç çağırma ve sesli yanıtı bağlayan geliştirme takımıyla Voxtral 3’ü yayımladı. Akış halinde çalışan yapı, aşamaların birbirini beklemeden ilerlemesini ve kullanıcı araya girdiğinde yanıtın kesilmesini destekliyor. Eylemciler fatura kontrolü veya randevu oluşturma için dış sistemlere bağlanabiliyor; şirketin barındırdığı hizmet de kurulum seçenekleri arasında.

Yapay Zekâ··Gece
Mikrofona bağlı hayali makinede kam ve kızak, fiziksel randevu yuvalarının üzerindeki renkli pimi tutan mekanik kavrayıcıya bağlanıyor.

Konuşma ve araçlar aynı akışa bağlandı

Yapay zekâ modelleri geliştiren Mistral, 20 Ekim’de Voxtral 3’ü sesli eylemciler için bir yazılım geliştirme takımıyla yayımladı. Takım; konuşmayı yazıya çevirme, akıl yürütme, araç çağırma ve ses üretimini akış halinde birleştiriyor. Bir aşama bitmeden diğeri çalışabiliyor. Eylemci, görüşme sırasında fatura kontrol etmek veya randevu oluşturmak için dış sistemlere bağlanabiliyor.[1], [2]

Ses çözümlemede alana özgü sözcükler kullanılabiliyor

Voxtral Small Transcribe 3, konuşmacıları ayırıyor; verilen kişi adlarından ve teknik terimlerden bağlam olarak yararlanabiliyor. Mistral, çözümleme ailesinin 50’den fazla dili desteklediğini belirtiyor. Gerçek zamanlı bileşen, kişinin konuşmasını ne zaman bitirdiğini kestirmek için ses ve anlam bilgisini kullanıyor. Kullanıcı araya girdiğinde eylemcinin konuşmayı kesmesi de destekleniyor.[1]

Geliştiriciler model aşamalarını ayrı ayrı değiştirebiliyor

Takım, gerçek zamanlı iletişim yazılımı LiveKit üzerine kurulu. Dinleme, akıl yürütme ve sesli yanıt ayrı model aşamaları olarak kalıyor. Geliştiriciler modeli, sesi veya dili diğer parçaları baştan yazmadan değiştirebiliyor. İnternet araması ve kurumun sistemlerinden bilgi getirme görüşme sırasında kullanılabiliyor. Mistral, barındırdığı hizmet üzerinden erişim sunuyor; bütün yapıyı kurum içinde veya özel bulutta çalıştırmak isteyenlerin şirketle görüşmesi gerekiyor.[1]

Kaynakça

  1. Haber kaynağıMistral AIMistral, Voxtral 3 ile konuşma ve araç kullanımını aynı akışta birleştirdi↩1↩2↩3
  2. Haber kaynağıThe DecoderMistral, akış halinde çalışan sesli eylemciler için Voxtral 3’ü açtı↩