Workload
endurance-30m-v1
Ո՞ր հարցին է պատասխանում
Դեգրադացվո՞ւմ է համակարգը երկարատև բեռի տակ, և կոնկրետ ե՞րբ։
Ինչ է չափվում
Պտտեցնում է interactive-assistant-v2 մարդկային կորպուսը closed-loop ռեժիմով concurrency 4-ով 180 րոպե տևողությամբ; հարցում առ հարցում մեկնարկի շեղումները տալիս են 5-րոպեանոց պատուհաններ՝ 30/60/180 րոպե checkpoint-ներով; պատուհանային միջթոքենային ուշացում, TTFT և հարցումների հաջողություն; ֆորմատի, լեզվի և կրկնությունների gate-եր։ Id-ի «30m»-ը պատմական է. առաջին checkpoint-ը։
Պնդումներ, որոնք այս workload-ը հիմնավորել չի կարող
Ողջ ծառայության ժամկետի հուսալիության պնդումներ; ջերմային եզրակացություններ առանց փաստագրված միջավայրի պայմանների։
Սառեցված ինքնություն
Workload-ի յուրաքանչյուր released ռևիզիա սառեցնում է տարրերի հեշերը, բեռնվածքի մոդելը և quality gate-երը։ Արդյունքները հղվում են ճշգրիտ ռևիզիային. ինքնության ցանկացած դաշտի փոփոխությունը ստեղծում է նոր ռևիզիա։ Ստորև բերված փաստերը կարդացվում են կատալոգի ֆայլից, ոչ թե մուտքագրված են էջում։
- Ռևիզիա
- 2026-08-03
- Բեռնվածքի մոդել
- closed_loop
- Quality gate-եր
- format_gate, language_gate, repetition_gate
- Մետրիկաների կոնտրակտ
- itl_ms_by_window, ttft_ms_by_window, requests_ok_by_window
- Կորպուսի հեշ
- 660eaad10d3f…