‘Are you joking, mate?’ AI doesn’t get sarcasm in non-American varieties of English

Wed, 30 Jul 2025 19:29:08 +1000

Andrew Pam <xanni [at] glasswings.com.au>

Andrew Pam
<https://theconversation.com/are-you-joking-mate-ai-doesnt-get-sarcasm-in-non-american-varieties-of-english-254986>

"In 2018, my Australian co-worker asked me, “Hey, how are you going?”. My
response – “I am taking a bus” – was met with a smirk. I had recently moved to
Australia. Despite studying English for more than 20 years, it took me a while
to familiarise myself with the Australian variety of the language.

It turns out large language models powered by artificial intelligence (AI) such
as ChatGPT experience a similar problem.

In new research, published in the Findings of the Association for
Computational Linguistics 2025
, my colleagues and I introduce a new tool for
evaluating the ability of different large language models to detect sentiment
and sarcasm in three varieties of English: Australian English, Indian English
and British English.

The results show there is still a long way to go until the promised benefits of
AI are enjoyed by all, no matter the type or variety of language they speak."

Cheers,
       *** Xanni ***
--
mailto:xanni@xanadu.net               Andrew Pam
http://xanadu.com.au/                 Chief Scientist, Xanadu
https://glasswings.com.au/            Partner, Glass Wings
https://sericyb.com.au/               Manager, Serious Cybernetics

Comment via email

Home E-Mail Sponsors Index Search About Us