Sikkerhetsanalytikere blir AI-bransjens nye premissleverandører
Publisert
Kilde: Wired
Sikkerhetsanalytikere blir AI-bransjens nye premissleverandører
Ingress: Den anonyme sikkerhetsforskeren kjent som «Husk» har gått fra å eksponere kritiske svakheter i store språkmodeller til å inngå samarbeid med selskapene bak teknologien. Utviklingen markerer et skifte i hvordan AI-aktører forholder seg til eksterne kritikere.
Gjennom sosiale medier har Husk systematisert arbeidet med å fremprovosere feil, sikkerhetsbrister og logiske brister i modeller fra aktører som OpenAI og Anthropic. Ved å bevisst «trolle» chatbotene til å generere upassende eller potensielt skadelig innhold, har han satt søkelys på utfordringene ved såkalt «red teaming».
Tradisjonelt har store teknologiselskaper sett på slike eksterne aktører med skepsis eller har ignorert dem. Nå ser vi en endring der selskapene i økende grad erkjenner verdien av utradisjonell tilnærming til sikkerhetstesting. I stedet for å bekjempe kritikerne, inviteres de nå inn for å bidra til utvikling av mer robuste sikkerhetsmekanismer.
Dette speiler en modning i bransjen. Det er ikke lenger tilstrekkelig å stole på interne tester når brukere i stor skala finner kreative måter å omgå sikkerhetsfiltre på. Eksterne sikkerhetseksperter, som ofte opererer med en mer uformell metodikk, fungerer i praksis som en billig og effektiv forsikring mot uforutsette sikkerhetshendelser.
For norske virksomheter som implementerer generativ AI, er denne utviklingen relevant for hvordan man håndterer egen risiko. Mange norske selskaper benytter seg av åpne API-løsninger fra aktører som OpenAI, og er dermed avhengige av at tredjeparts sikkerhetsarbeid holder mål.