Automatisering · ca. 2 min lesing

Evidently: følg med på data og KI-kvalitet

Evidently kan evaluere data og resultater fra maskinlæring og språkmodeller. Bruk det til å undersøke endringer og lage tydelige kvalitetskontroller.

Hva er Evidently?

Evidently er et åpent Python-verktøy for å evaluere, teste og overvåke data og KI-systemer. Prosjektet beskriver støtte for både tabelldata og tekst, med rapporter og kontroller som kan brukes fra utprøving til drift.

En sentral oppgave er å undersøke datadrift: at fordelingen i nye data avviker fra et valgt sammenligningsgrunnlag. Prosjektet har også evalueringer for språkmodellbaserte løsninger. En rapport kan gjøres om til tester ved å angi vilkår for hva som skal regnes som bestått.

Hva kan norske bedrifter bruke det til?

En mulig bruk er å følge med på om datagrunnlaget til en salgsprognose har endret karakter. En annen er å sammenligne svar fra en dokumentassistent før og etter at modellen eller instruksjonen endres. Dette er forslag til arbeidsmåter, ikke dokumenterte resultater fra en bestemt bedrift.

Velg målinger som svarer på et faktisk spørsmål. Lengre KI-svar er for eksempel ikke nødvendigvis bedre svar. Et utslag på datadrift betyr heller ikke alene at modellen har blitt dårligere; sesong, nye produkter eller endret registrering kan også påvirke tallene.

Slik kommer du i gang

  1. Opprett et eget Python-miljø og installer med pip install evidently.
  2. Følg repoets eksempel for en rapport på et lite datasett.
  3. Velg et referansegrunnlag og et nytt datasett med sammenlignbare kolonner.
  4. Undersøk resultatet før du setter grenser som utløser feil eller varsler.

Prosjektets README viser hvordan resultater kan lagres som HTML og JSON. Behold også informasjon om hvilke data og hvilken programversjon som ble brukt. Det gjør neste sammenligning lettere å forstå.

Avklar hvor evalueringen kjører. Noen metoder for å bedømme språkmodellsvar bruker en annen språkmodell og kan kreve en ekstern tjeneste. Undersøk dette før kundetekst inngår i evalueringen. Menneskelig gjennomgang bør fortsatt brukes for viktige kvalitetskrav.

Lisens

LICENSE-fila angir Apache License 2.0, en OSI-godkjent åpen kildekodelisens. Kommersiell bruk er mulig på lisensens vilkår. Den åpne programvaren og den administrerte skytjenesten må vurderes hver for seg; skytilbudet kan ha andre funksjoner og vilkår.

Hvorfor vi skriver om det

En KI-løsning bør vurderes med gjentakbare kontroller, ikke bare noen overbevisende demonstrasjoner. Evidently gir byggesteiner til dette. Omtalen bygger på offisiell dokumentasjon og repo, ikke egen installasjonstest. TikTok kan ikke leses direkte her, og kanalomtale er ikke verifisert.

Lenker

Kilder

Opplysningene er hentet fra kildene over 6. november 2026. Lisens, funksjoner og installasjon kan ha endret seg siden.

← Alle artikler om åpen kildekode