Speech interpretation benchmark

TolkBench

Uavhengig benchmark for tolket tale og sammendrag. Måler likeverdighet, sammendragsnøyaktighet og oversettelseskvalitet.

Likeverdighet.

Sier begge språkversjonene faktisk det samme? Ingen publisert standard måler dette. TolkBench gjør.

Sammendragsnøyaktighet.

Er kritiske fakta overført til sammendraget? Forankret i domenets egne retningslinjer.

Oversettelseskvalitet.

Måler genererte oversettelser mot profesjonelle referanser på hvert målspråk. Resultater per språkpar under databehandleravtale.

Driftsstabilitet.

Gyldig utdata under produksjonsforhold. Ingen hallusinasjoner, tomme eller ufullstendige resultater.