🚨OPPSUMMERING: OpenAI sa at hver oppdatering gjør ChatGPT smartere. Stanford beviste det motsatte. GPT-4s nøyaktighet på matteoppgaver falt fra 97,6 % til 2,4 % på bare tre måneder. Og ingen fortalte deg det. Forskere ved Stanford og UC Berkeley fulgte ChatGPTs faktiske ytelse over tid. Samme prompter. Samme oppgaver. Ulike resultater. Modellen som nesten besto matteoppgaver i mars, svarte feil 97 av 100 ganger innen juni. Kodegenereringen kollapset også. I mars kjørte over 50 % av GPT-4s kode perfekt på første forsøk. I juni var det bare 10 % som gjorde det. Samme spørsmål. Dramatisk dårligere svar. Hver stille oppdatering OpenAI lanserte, gjorde produktet du betaler 20 dollar i måneden for stille dårligere enn det du faktisk bruker det til. Forskerne testet GPT-3.5 og GPT-4 innen matematikk, koding, medisinske undersøkelser, resonnement og sensitive spørsmål. Driften var enorm og uforutsigbar. Noen oppgaver ble bedre. Andre falt utfor en klippe. Og det var ingen måte for deg å vite hva som var hvilket, fordi OpenAI aldri oppga hva som hadde endret seg. Her blir det personlig. Hvis du brukte ChatGPT til kode i mars og det fungerte, og så prøvde det samme i juni og det gikk i stykker, skyldte du sannsynligvis på deg selv. Du trodde du hadde satt den feil. Du prøvde igjen. Du kastet bort timer på å feilsøke dine egne spørsmål. Men det var ikke deg. Modellen hadde stille forandret seg under deg. OpenAIs produktdirektør gikk på X og sa «vi har ikke gjort GPT-4 dummere.» Stanfords data sier noe annet. 97,6 % til 2,4 % er ikke et spørsmål om mening. Hver bedrift som bygger på ChatGPTs API, hver student som er avhengig av det for skolearbeid, hver utvikler som bruker det til å levere kode, står på en bane som skifter uten forvarsel. Du stolte på det i går. Det endret seg over natten. Ingen har fortalt deg det. Du innbiller deg det ikke. ChatGPT blir dummere. Stanford beviste det.