Absurde tester avslører svakheter i selvkjørende biler

Selv de mest avanserte selvkjørende bilene sliter med å håndtere uventede situasjoner. Nå har forskere introdusert en ny testmetode som utsetter bilene for fullstendig tilfeldige og kaotiske scenarier – inkludert en elefant som krysser en bygate midt i trafikken.

«Hvorfor krysset elefanten veien? For å avsløre hvor skjøre modellene deres er,» skriver Andreas Geiger, leder for Autonomous Vision Group ved Universitetet i Tübingen i Tyskland, i et innlegg på LinkedIn. Han er medforfatter av en ny forskningsartikkel som presenterer en revolusjonerende tilnærming til testing av autonome kjøretøy.

Fra lek til alvor

Videoene fra testene kan minne om klipp fra en hacker som tuller med spillere i «GTA Online». Men hensikten er alvorlig: Å avsløre svakheter i dagens selvkjørende systemer.

«Det er et stille, men alvorlig problem innen forskning på autonome kjøretøy: De fleste modeller trenes og evalueres på de samme scenariene,» forklarer Geiger. «Det som ser ut som sterk ytelse, kan bare være god memorering av data.»

Fail2Drive: En ny standard for testing

Geiger og teamet hans har utviklet en ny testmetode kalt Fail2Drive. Den introduserer en rekke ukjente scenarier i den åpen kildekode-simulatoren CARLA, som er mye brukt i bransjen. Noen av scenariene er fullstendig absurde – som en elefant som følger fotgjengerfeltet – mens andre er mer realistiske, som en brannbil parkert midt i kjørebanen som bilen fullstendig ignorerer.

Da forskerne testet eksisterende autonome kjøretøysmodeller med Fail2Drive, oppdaget de en alarmerende svakhet: Gjennomsnittlig kjøreytelse falt med 22,8 prosent i ukjente situasjoner. Dette avdekker fundamentale robusthetsproblemer i dagens tilnærminger, ifølge Geiger.

Kan redde liv – både for mennesker og dyr

Selv om det gjenstår å se om denne metoden effektivt kan forberede autonome biler på kaoset i ekte trafikk, kan den i det minste redde livet til noen forvillede dyr. Ifølge forskerne har selvkjørende biler tidligere vært involvert i dødsfall blant dyr.

«Dette er ikke bare en lek med absurde scenarier. Det er en nødvendig test for å sikre at autonome kjøretøy faktisk er trygge i virkeligheten,» sier Geiger.

Hva betyr dette for fremtiden?

Med stadig flere autonome kjøretøy på veiene, blir robustheten i disse systemene stadig viktigere. Fail2Drive kan bli et viktig verktøy for utviklere som ønsker å sikre at bilene deres ikke bare klarer standardiserte tester, men også håndterer uventede situasjoner.

Selv om metoden fortsatt er under utvikling, viser den at dagens selvkjørende biler har betydelige svakheter når de utsettes for situasjoner de ikke har trent på. Dette understreker behovet for mer omfattende og varierte tester før teknologien kan anses som fullstendig trygg.

«Hva ser ut som sterk ytelse i standardiserte tester, kan bare være god memorering av data. Vi trenger tester som faktisk utfordrer systemene våre.»
— Andreas Geiger, Universitetet i Tübingen

Relatert lesning

Kilde: Futurism