„Car Wash“ testas su 53 modeliais

Santrauka lietuviškai

Straipsnyje pristatomas paprastas AI logikos testas, kuriame modeliai turėjo nuspręsti, ar 50 metrų atstumu esančiam automobilių plovyklėje plauti automobilį geriau nuvažiuoti, ar nueiti pėsčiomis. Iš 53 įvairių atvirojo kodo ir komercinių modelių tik 11 pateikė teisingą atsakymą (važiuoti) viename bandyme, o pakartojus testą 10 kartų, nuosekliai teisingai atsakė tik 5 modeliai. Tyrimas parodė, kad dauguma AI modelių šiame teste pasirodo prasčiau nei žmonės, kurie apklausoje teisingai atsakė 71,5% atvejų.