Discord: AI-moderering førte til feilaktige utestengelser

Publisert

Kilde: TechCrunch

Discord: AI-moderering førte til feilaktige utestengelser

Ingress: Kommunikasjonsplattformen Discord bekrefter at en teknisk feil i deres AI-baserte modereringssystem har ført til at hundrevis av brukere urettmessig har blitt utestengt. Problemet skyldes tilsynelatende at kunstig intelligens har feiltolket innhold i bilder.

Bakgrunn Feilen, som skal ha pågått siden mai, resulterte i at et betydelig antall kontoer ble automatisk flagget og blokkert. Spesielt over den siste helgen før feilen ble identifisert, ble rundt 200 ekstra brukere berørt. Disse utestengelsene skjedde til tross for at innholdet skal ha vært ufarlig og ikke i strid med plattformens retningslinjer.

Discord har uttalt at deres team nå har identifisert og rettet opp i feilen. Selskapet jobber med å gjennomgå de berørte sakene og reversere utestengelsene der det er aktuelt. En nærmere forklaring på den tekniske årsaken bak feiltolkningen er imidlertid ennå ikke gitt.

Norsk kontekst Selv om hendelsen er rapportert internasjonalt, har norske brukere av Discord potensielt også blitt rammet. Fenomenet med AI-drevet innholdsmoderering blir stadig mer utbredt, også på plattformer som benyttes i Norge. Dette belyser utfordringene med å stole blindt på automatiske systemer når det gjelder innholdsstyring og brukerrettigheter.

Konsekvenser Episoden reiser spørsmål ved robustheten og påliteligheten til AI-systemer for innholdsmoderering. Feilaktige utestengelser kan skade omdømmet til slike plattformer og føre til tap av brukere. Det understreker også behovet for menneskelig oppfølging og effektive klagemekanismer når automatiserte systemer trår feil. Brukere som opplever urettmessige utestengelser kan påklage beslutningen direkte til Discord for manuell vurdering.