Почему ChatGPT не советует твой сайт

у каждой нейросети свои роботы, и robots.txt может закрыть им вход. Закрыл - бот не прочитает сайт и не приведет к тебе человека, который спросил про твою нишу.

OAI-SearchBot - поиск ChatGPT: от него зависит, покажут ли тебя в ответах. GPTBot - сбор текстов для обучения моделей OpenAI. У Claude так же: Claude-SearchBot для поиска, ClaudeBot для обучения. PerplexityBot - поиск Perplexity.

открой твойсайт.ru/robots.txt и поищи эти имена. Рядом с ними Disallow: / - бот закрыт. Закрыт User-agent: * - закрыты все сразу.

"Проверь robots.txt: разреши доступ ботам OAI-SearchBot, GPTBot, Claude-SearchBot, ClaudeBot и PerplexityBot. Служебные разделы оставь закрытыми".

нейроответы в Яндексе собираются из обычной выдачи. Нет сайта в поиске - нет и в Нейро. А строчка User-agent: YandexAdditional с запретом убирает тебя из Нейро, даже если в поиске ты есть.

многие сайты от конструкторов с ИИ приходят в браузер пустыми, а текст дорисовывает JavaScript. Человек разницы не видит. А ИИ-боты скрипты не запускают: в исследовании Vercel 2024 года ни один крупный ИИ-робот JavaScript не исполнял. Для них страница - конверт без письма.

открой сайт → правая кнопка → "Просмотр кода страницы" → поиск по тексту: любая фраза из середины главной. Нашлась - бот ее видит. Не нашлась - для бота страница пустая.

"Сделай так, чтобы основной контент отдавался сервером в HTML: серверный рендеринг или статическая генерация страниц. Проверь через просмотр кода страницы, что текст там есть".

/llms.txt - короткая шпаргалка о сайте для нейросетей: кто ты, что делаешь и ссылки на главное. Обычный текст, как оглавление в начале книги.

"Создай /llms.txt в формате Markdown: название, одна фраза о продукте, список главных страниц со ссылками и описанием в одну строку".

цены, адрес и телефон на странице человек видит сразу, а машина угадывает. Разметка Schema.org - та же информация в виде анкеты: "название", "цена", "телефон". Угадывать не нужно.

"Добавь JSON-LD разметку Schema.org: Organization с контактами на главной, Product или Service с ценой на страницах товаров, FAQPage для частых вопросов".