Is ChatGPT Getting Dumber?

Fri, 25 Aug 2023 19:08:24 +1000

Andrew Pam <xanni [at] glasswings.com.au>

Andrew Pam
https://nymag.com/intelligencer/2023/07/is-chatgpt-getting-dumber.html

"Devoted users of ChatGPT, the chatbot that has become the mainstream face of
consumer AI, have spent the past couple of months trying to solve a frustrating
mystery: Is their trusty AI companion — their all-purpose assistant, their
accomplice in cheating, their secret co-worker, their patient tutor — becoming
less … intelligent?

In May, on Hacker News, worried ChatGPT devotees shared their hunches. “The
responses feel a little cagier at times than they used to,” wrote one. “I
assume it’s trying to limit hallucinations in order to increase public trust in
the technology.” Another user agreed: “To me, it feels like it’s started giving
superficial responses and encouraging follow-up elsewhere.” Others were more
confident in a change. “There’s no doubt that it’s gotten a lot worse on
coding,” one wrote. Peter Yang, a product lead at Roblox, lent his credibility
to the conspiracy:

By July, the theory had gained steam as a post titled “I use chatGPT for hours
every day and can say 100% it’s been nerfed over the last month or so” shot to
the top of the ChatGPT sub-Reddit, garnering thousands of concurring replies.
“It’s definitely gotten dumber,” wrote one person who uses ChatGPT to code. “It
was amazing how intricate and novel it would write things. Now, it feels very
cookie-cutter,” wrote another. Users shared examples of tasks that ChatGPT
formerly handled well that it struggled with today and offered theories as to
what was happening.

Is OpenAI optimizing for performance and trying to lower cost? Are its attempts
to “align” the product — or, in another interpretation, to censor its output —
interfering with its performance? Was ChatGPT, the fastest-growing online
service in history, just speedrunning the process of corporate
“enshittification?”"

Via Garbage Day: Elon Musk thought he was buying the whole internet
https://www.garbageday.email/p/elon-musk-thought-he-was-buying-the

Cheers,
       *** Xanni ***
--
mailto:xanni@xanadu.net               Andrew Pam
http://xanadu.com.au/                 Chief Scientist, Xanadu
https://glasswings.com.au/            Partner, Glass Wings
https://sericyb.com.au/               Manager, Serious Cybernetics

Comment via email

Home E-Mail Sponsors Index Search About Us