Cloudflare й AWS дали сайтам змогу брати гроші з AI-ботів

Платити чи пропускати? Перед власниками сайтів постав новий вибір: брати з AI-краулерів гроші за доступ чи пускати їх безкоштовно заради згадок у відповідях нейромереж. Однозначної відповіді немає — і в цьому вся суть суперечки.

Аргумент «брати гроші». Тридцять років краулери платили трафіком: індексували контент, а натомість надсилали відвідувачів. AI-боти дедалі частіше забирають текст, нічого не повертаючи. Відповідь індустрії — платний доступ через код HTTP 402. Cloudflare (липень 2025) і AWS (червень 2026) запустили pay-per-crawl на рівні edge, до них підключилися TollBit і Akamai — оплата за запит іде за протоколом x402.

Аргумент «не чіпати». Той бот, якому ви виставите рахунок, і той, що приводить клієнта з AI-відповіді, — часто одна й та сама труба. За даними Adobe, AI-переходи до ритейлерів зросли на 393% за рік. Закривши доступ, легко зникнути з відповідей, які вже приносять покупців. Докладний розбір — на Search Engine Journal.

Кому що підходить:

• Брати гроші розумно медіа, довідковим базам та архівам з незалежними каналами дистрибуції;
• Не ризикувати варто сайтам та e-commerce, які живуть за рахунок видимості в AI-відповідях.

Парадокс у тому, що закрити доступ технічно вже просто — код HTTP 402 є у Cloudflare й AWS, — а от відрізнити бота, який краде контент, від того, що приводить покупця, вміє далеко не кожен. Поки ця межа розмита, будь-яке рішення про плату лишається рішенням наосліп.

Корисно за темою: SGE та AI Overview: як оптимізувати сайт під AI-пошук Google · SEO-просування веб-сайту