В уроке я разбираю в формате теории, что нужно сделать, чтобы сайт попадал в поисковую базу языковых моделей: Claude, ChatGPT и Perplexity. Сначала проверяем, что боты не заблокированы в robots.txt, на сервере и в Cloudflare. Затем идёт обычная индексация в Google и Яндекс, добавление сайта в Bing и индексация в Brave Search, на который опирается Claude. В конце говорю о ссылках и о том, почему ссылка, брошенная в чат, индексацию не запускает. Урок подойдёт тем, кто продвигает сайт в ответах нейросетей и хочет понять порядок действий.
0:00–2:03 Первый шаг: убедиться, что нет запрета для ботов. Проверка robots.txt (можно отправить файл ChatGPT и спросить, заблокированы ли боты), блокировки по user-agent на сервере через Screaming Frog, в том числе с кастомным ботом, блокировка в Cloudflare. Для небольшого сайта достаточно смотреть логи и счётчики и проверять, заходят ли боты GPT, Claude…
🔒
Этот материал доступен участникам Клуба. Войдите или оформите доступ,
чтобы читать целиком, открывать видео и комментировать.