AI is eating website traffic, websites are blocking AI – and reliable information is getting harder to find

Mon, 21 Sep 2026 22:06:08 +1000

Andrew Pam <xanni [at] glasswings.com.au>

Andrew Pam
<https://theconversation.com/ai-is-eating-website-traffic-websites-are-blocking-ai-and-reliable-information-is-getting-harder-to-find-289817>

"For 30 years, the world wide web has run on a surprisingly profound social
contract: most sites are free for search engines to access, but if you use
their content you give credit by linking to the source.

Recently, that social contract has begun to collapse. Artificial intelligence
(AI) tools are crawling sites not to link to them, but to train models and
generate answers (which may or may not be accurate).

When you search for something, ChatGPT’s response or Google’s AI Overviews may
still include links to sources, but they’re a kind of optional extra to the
main answer.

This has triggered a bad dynamic for website owners, the public, and even AI
companies themselves: as websites lose traffic (and revenue), many are
beginning to block AI scraping tools, meaning AI results depend more on
low-quality websites (many of which are also generated by AI). As a result,
good information can be harder than ever to find."

Cheers,
       *** Xanni ***
--
mailto:xanni@xanadu.net               Andrew Pam
http://xanadu.com.au/                 Chief Scientist, Xanadu
https://glasswings.com.au/            Partner, Glass Wings
https://sericyb.com.au/               Manager, Serious Cybernetics

Comment via email

Home E-Mail Sponsors Index Search About Us