juridisk ki
- Flere av funnene og drøftelsene er allerede utdaterte
To forskere mener Lovdatas KI-baserte søkeverktøy har «fundamentale begrensinger». Nå svarer Lovdata på kritikken.
- Vi har invitert brukerne våre, og også konkurrenter, til å få innblikk i utviklingen av KI-verktøyet fra starten og vi stolte over å ha begynt et arbeid som ikke bare inspirerer til en slik evaluering, men som med forfatterens egne ord i noen tilfeller ville fått en god karakter på jusstudiene, sier Odd Storm-Paulsen.
Foto: Sveinung Bråthen
Nylig publiserte forsker Hans Christian Farsethås og professor Anders Løvlie en forskningsartikkel i tidsskriftet Lov & Rett hvor de advarer mot at Lovdatas nye KI-baserte søkemotor har «fundamentale begrensninger».
Artikkelforfatterne peker blant annet på fravær av juridisk metode, manglende evne til å gi gode svar dersom svaret ikke er regulert i lov, manglende tidsforståelse og sammenblanding av språklig likhet som utfordringer med søkeverktøyet.
Nå svarer Lovdata på kritikken.
- Det kunne kommet tydeligere
frem i forskningsartikkelen at evalueringen er utført i perioden rundt
lanseringen av verktøyet i juni, konstaterer direktør Odd Storm-Paulsen.
Mange endringer har nemlig skjedd siden da, forteller han.
- Artikkelen påpeker grunnleggende og vedvarende
utfordringer for et verktøy som hovedsakelig tar utgangspunkt i lover, som
håndtering av ulovfestet rett. Den tar også opp vanskelige problemstillinger
som vi ikke hadde løst ved lansering, men flere av funnene og drøftelsene er
allerede utdatert.
«Work in progress»
Lovdatas nye KI-søk skal kunne svare på juridiske spørsmål og gi en sammenstilling av rettsavgjørelser.
- Lovdatas KI-verktøy er et
«work in progress». Siden lanseringen har vi blant annet byttet språkmodeller
og sammenstillingsutforming, ferdigstilt et nytt rettspraksissøk, justert
vektinger, koblinger og instruksjoner og lagt til enda flere rettskilder, for å
nevne noen forbedringer, sier Paulsen.
- Mange av de grunnleggende problemene som påpekes i
artikkelen kommer til å utfordre, ikke bare vår løsning, men hele fagfeltet i
flere år fremover.
- Urealistisk sammenlikning
For Lovdata har den viktigste
læringen av forskningsartikkelen vært hvordan vi kommuniserer om og kan
justere forventningene til KI-verktøyet, konstaterer Paulsen.
- Søkesystemet sammenliknes i stor grad
med hvordan en erfaren, menneskelig jurist med sin kunnskap om juridisk metode
vil nærme seg oppgavene. I lanseringen av søkeverktøyet traff vi ikke helt på
kommunikasjonen og vi forstår at vi selv la opp til en noe urealistisk
sammenligning, sier han.
- Vi arbeider
kontinuerlig med å forbedre verktøyet blant annet basert på de
tilbakemeldingene vi mottar fra de mange som bruker verktøyet daglig. Verktøyet
gir mest nytte for dem som skal finne frem på rettsområder som man ikke jobber
med til daglig, og vi minner også om de andre verktøyene i Lovdata Pro 2 som
ofte gir raskere og mer presise svar hvis man vet hva man leter etter.
