ToplayoKARŞILAŞTIRMA LABORATUVARI

Uzun Bağlamda Üretim (CPU) — Qwen3 1.7B

Bu test yalnız işlemciyle çalışan küçük bir dil modelinin uzun bir sohbetin ardından yanıt yazma hızını ölçer (sohbet uzadıkça yavaşlama gibi). Yapay zekâ uygulamaları için önemlidir.

GrupDil ModeliKatmanDonanımBlokDil modeli (CPU)MetrikUzun bağlam hızı (token/sn)Referans20 token/sn · kestirimÖrnek5TurstandartBellek2.000 MBPuanpuana girer

Nasıl ölçülür?

  • Her geçişte önce 23 tokenlık kısa istem, sonra 3 826 tokenlık uzun istem (bağlam 4 096); her biri 128 token üretir. Puan uzun istemden sonraki üretim hızıdır; "korunan hız" yüzdesi yan metriktir.
  • Isı lideridir: turun içine yayılır ve ardından 120 saniye dinlenilir.

Platformlar ve motorlar

Motor, Toplayo'ya yüklenen sonuçların kendi etiketidir (cihaz ve GPU adları çıkarıldı). Her platformda bilinen en hızlı yol seçilir; iş ve çıktı aynı kalır.

PlatformMotorÖlçüm 4.0
iPhone ve iPadllama.cpp CPU v0.5.0ölçüldü · 1 cihaz
Macllama.cpp CPU v0.5.0ölçüldü · 5 cihaz
Windowsllama.cpp CPU v0.6.0ölçüldü · 3 cihaz
Androidllama.cpp CPU v0.6.0yalnız ön deneme turunda (Android 4.0 ölçümleri ertelendi)

Hangi puana girer?

  • Hiçbir süitte değildir: adı bir birimi ölçtüğü için süitlere girmez (birim adlı testler kendi biriminde kalır). KAI Benchmark Skoru'na katkısı yoktur.
  • Donanım katmanındadır ve KAI Donanım'ın Dil modeli (CPU) bloğunun 6 üyesinden biridir (blok ağırlığı 1,0). Bu test eksikse ya da "tamam" değilse blok verilmez; blok verilmezse KAI Donanım da verilmez. KAI Donanım.

Referans ve puan

Puan = ölçülen ÷ referans × 1000. Referans değer 20 token/sn; 1000 puan nominal termal durumdaki iPhone 15 Pro sınıfını temsil eder. Bu referans henüz kestirimdir ve kalibrasyon bekler; cihazlar arası oranlar bundan etkilenmez.

Platform. iPhone ve iPad, Mac, Windows, Android.