Claim

gemma-4-26B-A4B-it Q4_0 Ryzen AI Max+ 395-ի վրա (llama.cpp Vulkan) — needle retrieval success: 95.8 հարցումների %

active lab_repeated strix.gemma4.longctx.c1.needle-success

95.8հարցումների %

Չափումը

Beelink GTR9 Pro — AMD Ryzen AI Max+ 395, Radeon 8060S (gfx1151), 128 GB LPDDR5X-8000 unified համակարգի վրա, llama.cpp (server, Vulkan backend), b9049 (server_fingerprint b9049-2496f9c14) runtime-ով և ggml-org/gemma-4-26B-A4B-it-GGUF @ bb4531cda34d (Q4_0) մոդելով չափված «needle retrieval success» մեծությունը կազմել է 95.8 հարցումների % (share of all needle requests)։ Չափումը կատարվել է long-context-v1@2026-08-03 սառեցված workload-ի տակ; ապացույցի մակարդակը՝ lab_repeated, 3 վավեր գործարկում 1 ֆիզիկական յունիթի վրա։ Արժեքը վերաստացվում է գործարկումների հում գրառումներից ամեն CI build-ում։

Ձևակերպում

Share of requests where the model retrieved the embedded fact across a 2k-32k-token ladder, EN and RU, default operating mode.

Claim-երի ձևակերպումները հրապարակվում են միայն անգլերեն — սա կանոնական, մեջբերելի տարբերակն է։

Ապացույցներ

Համակարգ
Beelink GTR9 Pro — AMD Ryzen AI Max+ 395, Radeon 8060S (gfx1151), 128 GB LPDDR5X-8000 unified
Runtime
llama.cpp (server, Vulkan backend), b9049 (server_fingerprint b9049-2496f9c14)
Մոդելի արտեֆակտ
ggml-org/gemma-4-26B-A4B-it-GGUF @ bb4531cda34d (Q4_0)
Շրջանակ
long-context-v1@2026-08-03
Ագրեգացիա
share of all needle requests
Ապացույցի մակարդակ
lab_repeated
Կարգավիճակ
active
Սահմանափակումներ
Three repeated runs on one unit. Default operating mode of the model (reasoning emitted); disabling reasoning via the chat template was not tested for this model family.
Գործարկումներ

Արժեքի ստացումը

Արժեքն ամեն CI build-ում վերաստացվում է գործարկումների հում գրառումներից այս հարցումով — հրապարակված թիվը չի կարող լուռ շեղվել իր ապացույցներից։

catalog/claims/sql/needle-success.sql

Ինչպես մեջբերել

AGmind Systems Lab. "Share of requests where the model retrieved the embedded fact across a 2k-32k-token ladder, EN and RU, default operating mode." Claim strix.gemma4.longctx.c1.needle-success (95.8 % of requests), evidence level lab_repeated, scope long-context-v1@2026-08-03. https://agmind.ai/claims/strix.gemma4.longctx.c1.needle-success/
@misc{agmind_strix_gemma4_longctx_c1_needle_success,
  author       = {{AGmind Systems Lab}},
  title        = {Share of requests where the model retrieved the embedded fact across a 2k-32k-token ladder, EN and RU, default operating mode.},
  howpublished = {\url{https://agmind.ai/claims/strix.gemma4.longctx.c1.needle-success/}},
  note         = {Claim strix.gemma4.longctx.c1.needle-success: 95.8 \% of requests; evidence level lab\_repeated; scope long-context-v1@2026-08-03},
  year         = {2026}
}

Մեքենայաընթեռնելի. /claims/strix.gemma4.longctx.c1.needle-success.json · ամբողջ ռեեստրը

Ունե՞ք համադրելի սարքաշար։ Այս claim-ը կարելի է վերարտադրել. /reproduce/

Հրապարակված արդյունքների ուղղումները արձանագրվում են հրապարակայնորեն. errata

← Բոլոր claim-երը