Dagens AI
  • Nyheder
  • Danmark
  • Artikler
  • AI kunst
  • AI Chat
Reading: Apples studie afslører mangler i AI-modellers evne til at ræsonnere korrekt
NYHEDSBREV
Dagens AIDagens AI
  • Nyheder
  • Danmark
  • Artikler
  • AI kunst
  • AI Chat
Søg
  • Nyheder
  • Danmark
  • Artikler
  • AI kunst
  • AI Chat
Har du en konto? Log ind
Follow US
© DagensAI. Alle Rettigheder Forbeholdes.
Dagens AI > Nyheder > Apples studie afslører mangler i AI-modellers evne til at ræsonnere korrekt
Nyheder

Apples studie afslører mangler i AI-modellers evne til at ræsonnere korrekt

Senest opdateret: 13. oktober 2024 7:29
DagensAI
2 Min Læsning
Del
Del

En Ny Målestok for AI’s Begrænsninger

Apples seneste studie har afsløret, at selv de mest avancerede sprogmodeller fra giganter som Meta og OpenAI kan have lidt af en ”blondine-øjeblik”. Selvom de kan skrive smukke essays, så har de endnu ikke bestået matematikeksamen. De mangler nemlig de basale evner til at ræsonnere.

Indhold
En Ny Målestok for AI’s BegrænsningerGSM-Symbolic: Den Nye BenchmarkMatematik i KriseÆbleplukkeren, der gik galtHvem er ældst? Super Bowl Kvartbacks Og Logik

GSM-Symbolic: Den Nye Benchmark

Forskerne har skabt en ny benchmark, GSM-Symbolic, for at teste ræsonneringsevnerne hos disse modeller. Og resultaterne? Lad os bare sige, at svaret ændrer sig drastisk, hvis man bare ændrer et par ord i spørgsmålet. Det er som at spørge en papegøje om vej til bageren, og afhængigt af hvad du har på, kan svaret være alt fra “drej til venstre” til “spis en donut”.

Matematik i Krise

I sin undersøgelse legede Apple-forskerne med tal og fandt ud af, at bare det at tilføje en ekstra sætning til et matematikspørgsmål kan reducere modelens nøjagtighed med op til 65%. Dette kan forklares med, at disse modeller reagerer mere på overfladeformuleringer end selve problemets kerne. Man kan undre sig over, hvordan de ville klare sig til en 5. klasses matematikprøve!

Æbleplukkeren, der gik galt

Tag for eksempel problemet med Oliver og hans kiwier. Oliver plukkede 44 kiwier på fredag, 58 lørdag, og dobbelt så mange på søndag som fredag. Der blev insinueret, at fem kiwi var små, men det skulle ikke have påvirket den samlede optælling. Alligevel trak modellerne de små kiwier fra. Så hvad blev konklusionen? At modellerne muligvis kunne tænke som en kiwi.

OpenAI’s nyeste AI-modeller nægter at acceptere nedlukning
1. juni 2025
Nick Clegg advarer: Forudgående samtykke vil dræbe AI-industrien
26. maj 2025

Hvem er ældst? Super Bowl Kvartbacks Og Logik

Tilbage i 2019 afslørede et andet studie en lignende forvirring, da spørgsmål om aldrende quarterbacks blev smidt i AI-gryden. Det viser sig, at tilføjelse af en smule irrelevant baggrundsinformation kan sende disse sprogmodeller på vildspor, som en forvirret gps-enhed.

Så hvad er moralen i denne historie? Overlad endelig ikke livsvigtige matematiske beslutninger til en model, der tænker, at frugternes størrelse betyder noget i den store, saftige sammenhæng.

TAGGED:AIAppleMetaNyhederOpenAI
Del denne artikel
Facebook Email Copy Link Print
Forrige Artikel Google’s Nobel-prisvindere skaber debat om AI-forskningens fremtid og anerkendelse
Næste Artikel Microsoft lancerer nye AI-værktøjer til sundhedssektoren.
Ingen kommentarer Ingen kommentarer

Skriv et svar Annuller svar

Du skal være logget ind for at skrive en kommentar.

200FollowersLike
300FollowersFollow
1kFollowersPin
- Annonce-
Japanske Plakater

Relaterede AI Artikler

Nyheder

OpenAI danner ny sikkerhedskomité efter nøgleforskeres afgang

Ny Sikkerheds- og Sikkerhedskomité dannet hos OpenAI OpenAI, den førende…

2 Min Læsning
Nyheder

Apple træner AI med Look Around-data fra 2025

Apple tager AI til nye højder med Look Around-billeder Apple…

3 Min Læsning
Nyheder

Apple-produkter får AI-forbedringer med OpenAI-partnerskab

Apple Tager Springet Ind i AI's Nye Æra Under deres…

3 Min Læsning
AI kunst

AI kunst: Kosmisk Energiudladning

Farvespil og Komposition Det præsenterede digitale kunstværk er en eksplosion…

2 Min Læsning
Dagens AIDagens AI
Follow US
© DagensAI. Danske AI nyheder.
  • Privatlivspolitik
  • Kontakt
Welcome Back!

Sign in to your account

Username or Email Address
Password

Lost your password?