KT’nin AutoModelRouter’ı RouterArena’da ikinci sıraya yerleşti
KT, AutoModelRouter’ın yanıt doğruluğu ile gideri birlikte değerlendiren RouterArena sıralamasında ikinci olduğunu açıkladı. Açık listede KT-ModelRouter adıyla yer alan sistem, Paix2’nin arkasında. Yönlendirici isteğin türüne, zorluğuna ve bilgi alanına göre dil modeli seçiyor. Bu sıralama bir kıyaslama sonucunu gösteriyor; müşterilerin kullanımında sağlanan tasarrufu ölçmüyor.
Yapay Zekâ··Öğle
KT-ModelRouter doğruluk ve gider sıralamasında ikinci
KT, AutoModelRouter adlı sisteminin Rice Üniversitesi araştırmacılarının geliştirdiği RouterArena kıyaslamasında ikinci sıraya yerleştiğini 27 Eylül’de açıkladı. ChosunBiz ve Dailian, girişin açık listede KT-ModelRouter adıyla bulunduğunu ve sonucun doğruluk ile gideri birlikte değerlendiren Acc-Cost Arena için geçerli olduğunu aktarıyor. Bu sıralama, bütün dil modellerinin genel niteliğine ilişkin bir derece değil; kullanıcı isteğini başka modellere yönlendiren sistemlerin belirli bir ölçümdeki yerini gösteriyor. Açık listede KT-ModelRouter 76,28 puanla, 77,63 puanlı Paix2’nin arkasında görünüyor.[1], [2]
Yönlendirici istek türüne göre model seçiyor
AutoModelRouter’ın işi, her kullanıcı isteğini tek bir dil modeline göndermek yerine görevin türünü, zorluğunu ve bilgi alanını değerlendirerek uygun modeli seçmek. Dailian’a göre sistem yanıt niteliğini ve işlem giderini birlikte gözetiyor. Sıralamada akademik yönlendiricilerle Azure Model Router gibi ticari ürünler de bulunuyor. Böylece KT’nin açıkladığı ikincilik, bir sohbet arayüzünün popülerliğiyle ya da tek bir modelin her soruya verdiği yanıtla ilgili değil; hangi isteğin hangi modele aktarılacağına ilişkin bir kıyaslamayı anlatıyor.[2]
Kıyaslama yaklaşık 8.400 sorguya dayanıyor
ChosunBiz’e göre RouterArena yaklaşık 8.400 sorguyla model yönlendirme sistemlerini değerlendiriyor; kıyaslamanın dayandığı çalışma ICLR 2026 konferansına kabul edildi. Bu kapsam, sıralamanın nasıl elde edildiğini anlamak için önemli: sonuç, tanımlı sorgular ve doğruluk-gider ölçütü üzerinde hesaplanıyor. KT’nin müşterilerinin üretim ortamında hangi modelleri kullandığı ya da bu yönlendiriciyle ne kadar tasarruf sağladığı haberlerde ölçülmüyor. Açıklanan gelişme, şirketin model seçme yönteminin açık bir kıyaslamadaki derecesiyle sınırlı.[1]
