Digitaliseringsdirektoratet tar et stort skritt fremover ved å implementere kunstig intelligens (KI) som et hjelpemiddel for å forbedre søkefunksjonaliteten på data.norge.no. Dette initiativet er en del av vår pågående innsats for å gjøre offentlige data mer tilgjengelige og brukervennlige å ta i bruk.
Å finne relevante datasett kan ofte være en utfordrende og tidkrevende oppgave. For å løse dette problemet tester vi nå ut KI-teknologi som kan hjelpe brukere med å finne nøyaktig det de leter etter, raskere og mer effektivt.
– Digitaliseringsdirektoratet følger utviklingen av kunstig intelligens, og det er viktig og nyttig for oss å prøve ut de mulighetene som KI gir. Når det gir bedre tjenester til brukerne, er det en vinn-vinn-situasjon, sier Tor Arild Sunnevåg, seksjonssjef for Strategi og forretningsutvikling og produktgruppeleder for datadelingsområdet i Digitaliseringsdirektoratet.
Den nye KI-drevne søkefunksjonen gjør det mulig for brukerne å stille enkle, naturlige spørsmål og motta relevante forslag til datasett som dekker deres behov. Dette reduserer tiden og innsatsen det tar å finne relevant informasjon i den omfattende mengden av tilgjengelige data.
Fordeler med kunstig intelligens i søket
Den KI-drevne søkefunksjonen gir en intuitiv brukeropplevelse, hvor søk blir enklere uten behov for avanserte søkestrenger. KI-en matcher spørsmål med de mest relevante datasettene, noe som gjør det lettere å oppdage datasett man ikke kjenner fra før. Brukerne kan dermed bruke mer tid på analyse og utnyttelse av data, og mindre tid på å lete.
Hvordan fungerer det?
Ved hjelp av avansert maskinlæring og naturlig språkprosessering kan KI-en forstå og tolke brukerens spørsmål, og deretter finne og foreslå relevante datasett fra offentlig sektor. Dette er et viktig skritt mot å gjøre offentlige data mer tilgjengelige og nyttige for et bredere spekter av brukere.
Prøv det i dag
Vi oppfordrer alle brukere til å besøke data.norge.no og prøve den nye KI-drevne søkefunksjonen. Opplev hvordan kunstig intelligens kan forenkle og forbedre din tilgang til offentlig data.
Med denne innovasjonen fortsetter Digitaliseringsdirektoratet å fremme en mer digital og datadrevet fremtid, og vi ser frem til å høre tilbakemeldingene fra brukerne våre.
Utforskingen startet som et samarbeid
– Utforskingen startet som et samarbeid med Datasamarbeidet i samferdselssektoren. De utviklet en prototype basert på et uttrekk av data fra data.norge.no. Resultatene var så gode at vi bestemte oss for å ta løsningen videre, sier produkteier Kjersti Steien.
Teknisk detaljer
- Denne tjenesten benytter Google Vertex AI for språkmodellering uten behov for finjustering (tuning), noe som sparer tid og kostnader. Siden Digitaliseringsdirektoratet ikke har trent opp modellen videre, skaper dette en frihet til å bytte ut med en annen språkmodell etter hvert som det kommer bedre modeller på markedet. Google kommer hyppig med nye versjoner som potensielt kan forbedre både kvaliteten og ytelsen.
- Backendtjenesten er skrevet i Kotlin og bruker LangChain som rammeverk for å opprette prompt-templates og interagere med Vertex. Tjenesten bruker to forskjellige modeller: text-multilingual-embedding-002 til å generere tekst-embeddinger og text-bison@002 (PaLM 2 for Text) til å filtrere funnene og forklare hvorfor de er relevant.. Datagrunnlaget, som er basert på datasettbeskrivelser, ligger i en PostgreSQL-instans på Cloud SQL i GCP, med pgvector-utvidelsen for vektorbaserte likhetssøk. Kildekoden til tjenesten finner du her.
- Søket som benytter kunstig intelligens, gir ikke alltid det fullstendige bildet. Det tradisjonelle søket er fortsatt tilgjengelig for slike formål.
- Før lansering har teamet støttet seg på Veiledning for ansvarlig bruk og utvikling av kunstig intelligens, utviklet av Digdir, for å sikre at teknologien tas i bruk på en ansvarlig måte.