AEO بدون أساطير: ما الذي يؤثر حقًا على الاستشهادات في Perplexity وChatGPT
Сначала о том, чего никто не обещает
Нет способа гарантированно попасть в ответ Perplexity, ChatGPT или AI Overviews. Модели выбирают источники по своим правилам, которые не публикуются и меняются. Любой, кто продаёт «гарантированные цитаты в ChatGPT», продаёт надежду.
Что можно контролировать: чтобы поисковые роботы этих систем могли забрать страницу, чтобы в ней был ясный ответ на конкретный вопрос и чтобы этот ответ было легко извлечь. Это пересекается с обычным SEO больше, чем принято говорить.
Шаг 1. Не закрыться от нужных роботов
У каждой компании несколько агентов с разными задачами. Блокировка «всех AI-ботов» одним переключателем часто закрывает и поиск, который как раз даёт цитаты.
- OpenAI:
OAI-SearchBot— индекс для поиска в ChatGPT,GPTBot— сбор данных для обучения,ChatGPT-User— загрузка страницы по запросу пользователя. - Perplexity:
PerplexityBotдля индекса иPerplexity-Userдля запросов пользователей. - Anthropic:
ClaudeBot,Claude-SearchBot,Claude-Userс аналогичным разделением. - Google: AI Overviews строятся на обычном индексе Googlebot. Токен
Google-Extendedуправляет использованием контента для Gemini, но не влияет на попадание в Поиск.
Пример: поиск разрешён, обучение запрещено.
# robots.txt User-agent: OAI-SearchBot Allow: / User-agent: PerplexityBot Allow: / User-agent: GPTBot Disallow: / User-agent: * Allow: / Sitemap: https://example.com/sitemap.xml
Затем проверьте слой перед сайтом. У Cloudflare есть управляемые правила для AI-краулеров, и если их включили когда-то «на всякий случай», robots.txt уже ничего не решает — запросы режутся на WAF.
Шаг 2. Проверить, что робот видит текст
Многие краулеры, судя по логам владельцев сайтов, забирают HTML и не исполняют JavaScript. Если ответ появляется только после гидрации, робот видит пустую оболочку.
curl -s -A "OAI-SearchBot/1.0" https://example.com/ru/forum/some-thread \ | sed -e 's/<[^>]*>//g' | grep -c "ключевая фраза из ответа"
Ноль — текст рендерится на клиенте. В Next.js это значит, что контент нужно отдавать из серверного компонента, а не грузить через useEffect.
Заодно посмотрите статус и время ответа: страница, которая отвечает по 4 секунды или отдаёт 403 неизвестным агентам, проигрывает быстрой и открытой.
Шаг 3. Писать так, чтобы ответ можно было вырезать
Системы с поиском цитируют фрагменты. Фрагмент проще взять, если он самодостаточен.
- Заголовок раздела формулируйте как вопрос или как точное утверждение: «Почему Docker обходит UFW», а не «Нюансы».
- Первые одно-два предложения под заголовком — прямой ответ. Подробности, оговорки и код — ниже.
- Конкретика вместо общих слов: версия, команда, значение по умолчанию, ограничение. «Работает начиная с nginx 1.25» цитируется, «в современных версиях» — нет.
- Указывайте дату обновления и автора. Для технических вопросов свежесть важна и людям, и машинам.
- Таблицы сравнения и списки шагов хорошо переживают извлечение, если в каждой строке есть законченная мысль.
Это не трюк под ИИ: такие страницы лучше читаются людьми и лучше ранжируются в обычном поиске.
Шаг 4. Структурированные данные — по делу
JSON-LD помогает машине понять тип страницы, автора, даты и иерархию. Нет публичных подтверждений, что разметка сама по себе повышает шанс цитаты в ответах LLM. Делайте её корректной и соответствующей видимому содержимому, а не для галочки: Article или DiscussionForumPosting с реальными датами и автором, BreadcrumbList для навигации.
Про llms.txt
llms.txt - مقترح (Answer.AI, 2024) لوضع ملف Markdown مع وصف مختصر وروابط للصفحات الرئيسية في جذر الموقع. وهذا ليس معيارًا، ولم تذكر محركات البحث الكبرى أنها تأخذه بعين الاعتبار عند اختيار المصادر؛ قال ممثلو Google إنهم لا يستخدمونه. الملف رخيص الثمن ويمكن أن يكون مفيدًا للوكلاء الذين أعطاهم المستخدم موقعك بوضوح. ولكن لا يوجد سبب لتوقع زيادة في الاستشهادات منه.
كيفية القياس
وبدون قياس، يصبح AEO اعتقادًا. ثلاثة مصادر للبيانات:
- 1.سجلات الخادم. عدد الطلبات الواردة من وكلاء البحث والصفحات التي يستردونها.
grep -E "OAI-SearchBot|PerplexityBot|Claude-SearchBot" /var/log/nginx/access.log \
| awk '{print $7}' | sort | uniq -c | sort -rn | head -20من السهل تزييف وكيل المستخدم. يقوم OpenAI وPerplexity بنشر نطاقات IP لروبوتاتهم - تحقق منها قبل القفز إلى الاستنتاجات.
- 2.الانتقالات. يضيف ChatGPT
utm_source=chatgpt.comإلى الروابط، وتكون الانتقالات من Perplexity مرئية بواسطة المُحيلperplexity.ai. قم بإنشاء شريحة منفصلة لهم في التحليلات.
- 3.أخذ العينات اليدوية مرة واحدة في الشهر، اطرح على الأنظمة 20 سؤالاً لديك أفضل إجابة عليها وقم بتدوين الأشخاص الذين يتم الاستشهاد بهم. إنه أمر صعب، لكنه يظهر الديناميكيات والمنافسين.
##أخطاء شائعة
- أغلق
GPTBotوتعتقد أنك أغلقت بحث ChatGPT، أو العكس. - قم بإنشاء المئات من صفحات "الأسئلة ذات الإجابات القصيرة" ضمن AEO. يتم تصنيف هذه الصفحات بشكل سيئ في البحث الكلاسيكي وفي الأنظمة التي تعتمد عليها.
- إخفاء الاستجابة خلف نافذة اشتراك مشروط أو شعار ملف تعريف الارتباط الذي يتداخل مع المحتوى بتنسيق HTML.
- توقع التأثير خلال أسبوع. لا يتم تحديث الفهارس على الفور، ولا تثبت الملاحظات الفردية أي شيء.
متى لا تفعل هذا
إذا لم يكن الموقع يحتوي على فهرسة في البحث العادي، فأنت بحاجة إلى البدء من هناك: تعتمد العديد من أنظمة الاستجابة على فهارس البحث. إذا كان المنتج يحل المشكلات التي لم يتم طرحها في النص (الأدوات الداخلية، أنظمة B2B المغلقة)، فلن تؤتي الاستثمارات في AEO ثمارها.