Eigen RadarYapay Zekâ
Analiz

ElevenLabs, dinleme ve sesli yanıtı Realtime modellerinde birleştirdi

ElevenLabs, dinleme, konuşma sırasını belirleme ve sesli yanıtı birleştiren iki model yayımladı. Mini daha sade görüşmeleri, Max ise müşteri hizmetleri ve araç kullanımını gerektiren işleri hedefliyor. Modeller ElevenAgents üzerinden veya doğrudan arayüzle kullanılabiliyor. WebRTC üzerinden bağlanan uygulamaların, doğrudan hizmet için bağlantı yöntemini değiştirmesi gerekiyor; platform seçeneği ise iletişim kanallarını ve izleme araçlarını içeriyor.

Yapay Zekâ··Gece
Hayalî bir akustik odada fildişi ve bronz iki dinleme-konuşma düzeneği; büyük olanı küçük bir araç mekanizmasına bağlı.

İki model canlı sesli görüşmeleri yürütüyor

Ses teknolojileri geliştiren ElevenLabs, Eleven Realtime v1 Mini ve v1 Max modellerini yayımladı. Konuşmadan konuşmaya çalışan modeller, sesi tanıma, konuşma sırasını belirleme ve yanıtı seslendirmeyi birleştiriyor. Mini daha sade görüşmeleri, öğretimi ve etkileşimli karakterleri; Max ise müşteri hizmetleri ile araç kullanılan çok adımlı işleri hedefliyor. İki modele ElevenAgents veya doğrudan Realtime arayüzüyle erişiliyor.[1], [2]

Görüşmenin akışı modelin görevlerine katılıyor

Bütünleşik yapı, duraksamadan sonra ne kadar bekleneceği ve kullanıcı araya girdiğinde nasıl yanıt verileceği gibi kararları da kapsıyor. ElevenLabs, iki modelin 90’dan fazla dili desteklediğini belirtiyor. Ekipler ElevenAgents içinde Realtime modeli seçerek platformun telefon, internet, WhatsApp ve çağrı merkezi bağlantılarını kullanabiliyor. İş akışları, bilgi tabanı, sınama ve izleme de platformun işlevleri arasında.[1]

Doğrudan erişim WebSocket bağlantısı gerektiriyor

Doğrudan uygulama programlama arayüzü (API), OpenAI Realtime belirtimini izliyor. Mevcut bağlantılarda uç nokta ve model adı değiştirilebiliyor; ancak veri aktarımı yalnızca WebSocket üzerinden yapılıyor. WebRTC kullanan uygulamaların önce bu bağlantı biçimini değiştirmesi gerekiyor. Doğrudan arayüz ElevenAgents’ten ayrı çalışıyor. ElevenLabs, iletişim kanallarına ve bilgi tabanı özelliklerine gereksinim duyan ekiplere platformu öneriyor.[1]

Kaynakça

  1. Haber kaynağıElevenLabsElevenLabs, konuşmayı doğrudan işleyen Realtime modellerini açtı↩1↩2↩3
  2. Haber kaynağıThe DecoderElevenLabs, konuşmadan konuşmaya çalışan Mini ve Max modellerini yayımladı↩