Приватні чати Claude потрапили в індекс Google

Публічні посилання на переписки з Claude опинилися в пошуку Google — і це не злам, а наслідок простої недбалості: сторінки з діалогами були відкриті для пошуковиків, і ніхто не закрив їх від індексації.

Механіка банальна. Коли користувач Claude вмикав функцію «поділитися діалогом», Anthropic створював публічний URL. Ці адреси були доступні краулерам, а мета-тега noindex і заборони в robots.txt на них не стояло. Далі все передбачувано: як нагадує Search Engine Land, якщо URL доступний пошуковій системі й не виключений з індексації, він буде проіндексований. Схоже вже траплялося з розшареними чатами інших AI-сервісів — граблі ті самі. Функція «поділитися» сьогодні є майже в кожного популярного сервісу, від нотаток до AI-асистентів, і кожне таке посилання — це окрема сторінка, яку краулер цілком може обійти й додати в індекс.

Що зачепило в цій історії:

• посилання, які виглядали приватними, насправді були публічними — цього вистачило, щоб діалог потрапив в індекс;
• причина не у «витоку даних», а у відсутності noindex і правил robots.txt — базової гігієни індексації;
• досить однієї розшареної сторінки, щоб її знайшли за звичайним запитом у Google.

Урок стосується будь-якого сайту, де є сторінки «не для всіх»: чернетки, особисті кабінети, результати внутрішнього пошуку, сторінки «поділитися». Пошуковик не читає думок — він індексує все, що відкрите й не помічене noindex. Закривається це базовими засобами: robots.txt і noindex для share- і службових розділів, заголовок X-Robots-Tag на приватних URL. Перевіряється теж просто — оператором site: по своєму домену і звітом «Покриття» в Search Console, де видно, що реально потрапило в індекс і чи не світяться там зайві URL. Контроль індексації тримається на регулярних перевірках: одного налаштування тут замало.

Найнеприємніше в цій історії те, що «приватно» в інтерфейсі й «закрито» для Google виглядали для користувачів одним і тим самим, а різницю між ними показав уже сам пошук.

Корисно за темою: Відкриті та закриті від індексації сторінки: помилки в robots.txt · SEO аудит