Research

TolkBench: Benchmark for likeverdighet i tolking, sammendrag og oversettelse

L2X AI AS, april 2026

Når to parter kommuniserer via tolk, ender samtalen ofte opp med et sammendrag som må utformes på ett eller begge språk. Det finnes ingen benchmark vi kjenner til som måler om det sammendraget faktisk gjenspeiler det som ble sagt, uansett hvilket språk det er skrevet på.

De fleste oversettelsesverktøy rapporterer kvalitetspoeng per språkpar. Publiserte studier som BERTScore med XLM-R, Correct Language Rate (CLR) og Translate-then-Evaluate ser generelt på oversettelseskvalitet per språkpar og på flerspråklig faktuell konsistens. Ingen publisert standard vi kjenner til måler kryss-språklig likeverdighet mellom sammendrag på to språk fra samme samtale.

Slike sammendrag, ofte bare muntlig bekreftet, ender opp i journaler, saksdokumenter, vedtak og referater. Steder hvor innholdet blir lagt til grunn for videre handlinger og beslutninger.

En ny benchmark

TolkBench er L2Xs interne kvalitetsrammeverk for tolkeapplikasjoner. Det måler fire dimensjoner som er direkte relevante for saksbehandling.

Be om brief

Måleresultater per språkpar og dokumenttype, metodikkdetaljer, domenespesifikke kriterielister og sporingsrapporter deles direkte med pilot- og revisjonskunder under databehandleravtale.

Hvis dette er relevant for dere

Bruker dere interne sammendrag i egen virksomhet, avhør, journalnotater, saksnotater, møtereferater eller nyhetssammendrag, og ønsker å vite hvordan de holder mål?

Vi tilbyr TolkBench-evaluering mot en skreddersydd kriterieliste for deres domene. En ny domenetilpasning krever et engangsoppsett (referansefakta per dokumenttype) før løpende evaluering. Rammeverket er pipeline-agnostisk, vi kan evaluere sammendrag fra hvilken som helst kilde: intern LLM, skyløsning, manuelt produsert.

Første samtale og en eksempelevaluering er kostnadsfritt. Løpende evalueringer krever signert databehandleravtale og avtalt omfang.

Ta kontakt: info@l2x.ai