كيف تختار محركات الذكاء الاصطناعي مصادرها؟ ما تقوله الشركات رسميًا
ماذا يعني أن «يختار» المحرك مصدرًا؟
حين يجيب محرك مثل ChatGPT أو Google AI Overviews عن سؤال يحتاج معلومات حديثة، يبحث في فهرس من صفحات الويب، ثم يكتب إجابة ويعرض بعض هذه الصفحات مصادرَ. اختيار المصدر يمر بمرحلتين: أن تكون صفحتك في الفهرس الذي يبحث فيه المحرك، ثم أن تُعد مناسبة للإجابة. المرحلة الأولى تتحكم بها إلى حد كبير، والثانية لا تعلن الشركات تفاصيلها.
الإجابة المختصرة
ما تعلنه الشركات رسميًا يخص المرحلة الأولى: كيف تصل البوتات إلى موقعك وكيف تتحكم فيها. أما سبب اختيار صفحة بعينها مصدرًا للإجابة، فلا تنشر أي شركة معاييره بالتفصيل. القرار العملي إذن: افتح الطريق للبوتات الصحيحة، واجعل صفحاتك تجيب بوضوح، ثم قِس بانتظام بدل التخمين.
ما تقوله كل شركة رسميًا
| المحرك | من أين يقرأ | البوت الذي يهمك | ما تعلنه الشركة |
|---|---|---|---|
| Google AI Overviews وAI Mode | فهرس بحث Google | Googlebot | لا متطلبات إضافية: صفحة مفهرسة ومؤهلة للظهور مع مقتطف |
| ChatGPT (البحث) | بحث ChatGPT | OAI-SearchBot | هذا البوت لإظهار المواقع في البحث، وGPTBot منفصل للتدريب |
| Perplexity | فهرس Perplexity | PerplexityBot | بوت للفهرسة، وآخر يزور الصفحة عند طلب المستخدم |
| Microsoft Copilot | بحث Bing | Bingbot | يعتمد على نتائج Bing، فالظهور في Bing شرط أولي |
ما تتحكم فيه فعلًا
1. الوصول
robots.txt يحدد أي بوت يدخل. القاعدة الأهم: افصل بين بوتات البحث وبوتات التدريب، فهما قراران مختلفان.
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /
User-agent: Google-Extended
Disallow: /
هذا المثال يسمح بالظهور في بحث ChatGPT، ويمنع استخدام المحتوى في التدريب عند OpenAI وGoogle، دون أن يمس الظهور في بحث Google. اختر ما يناسب سياستك، لكن لا تحجب بوت البحث وأنت تريد الظهور.
2. المقتطفات
في Google، أدوات التحكم في المقتطفات تنطبق على ميزات الذكاء الاصطناعي أيضًا: nosnippet وdata-nosnippet وmax-snippet. إن منعت المقتطف في صفحة، فلا تتوقع أن تُقتبس في إجابة.
3. قابلية القراءة
البوت يقرأ ما يرسله الخادم. إن كانت المعلومة المهمة (سعر، جدول، ترتيب) تُحمَّل بسكربت بعد فتح الصفحة، فقد لا يراها بعض البوتات أصلًا. افحص ما يصل فعلًا:
curl -sL https://example.com/pricing | grep -c 'ريال'
إن كان الرقم صفرًا وأنت ترى الأسعار في المتصفح، فالأسعار تُبنى في المتصفح لا في الصفحة نفسها.
ما لا تعلنه الشركات
- معايير اختيار الصفحة مصدرًا: لا توجد قائمة رسمية بالعوامل وأوزانها لأي محرك.
- عدد المصادر وترتيبها: يتغير حسب السؤال والوقت.
- العلاقة بين الذكر والاستشهاد: قد يذكر المحرك اسم شركة دون رابط لموقعها، وقد يستشهد بالموقع دون ذكر الاسم في النص. في قياساتنا الشهرية نرى الحالتين، ولذلك نقيسهما منفصلين.
أي جهة تعدك بمعادلة مضمونة للظهور في إجابات الذكاء الاصطناعي تتجاوز ما تعلنه الشركات نفسها.
كيف تبني قرارك على القياس
- اختر أسئلة حقيقية: ما يكتبه عملاؤك فعلًا، لا ما تتمنى أن يكتبوه. بيانات البحث تساعد في اختيارها.
- ثبّت الشروط: نفس الأسئلة، ونفس اللغة والمدينة، ونفس الطريقة كل شهر.
- سجّل إشارتين منفصلتين: هل ذُكر اسمك؟ وهل استُشهد بموقعك؟ راجع الفرق بين الذكر والترشيح.
- غيّر شيئًا واحدًا ثم قِس: بهذا تعرف ما الذي أثّر.
ماذا تفعل غدًا
- افتح robots.txt وتأكد أن OAI-SearchBot وPerplexityBot وBingbot وGooglebot غير محجوبة.
- قرر سياستك في بوتات التدريب (GPTBot وGoogle-Extended) قرارًا منفصلًا ومكتوبًا.
- افحص بأمر curl أن أهم معلوماتك موجودة في الصفحة نفسها.
- اكتب عشرة أسئلة يطرحها عملاؤك، وابدأ قياسها شهريًا، أو اطلب فحصًا مجانيًا يقيس ما يقوله الذكاء الاصطناعي عن شركتك.
أسئلة شائعة
هل أحتاج تحسينًا خاصًا للظهور في Google AI Overviews؟
تقول Google إنه لا توجد متطلبات إضافية. الصفحة يجب أن تكون مفهرسة ومؤهلة للظهور في البحث مع مقتطف، وتنطبق عليها ممارسات تحسين محركات البحث نفسها.
إذا حجبت GPTBot هل أختفي من ChatGPT؟
لا. تقول OpenAI إن GPTBot لجمع بيانات التدريب، وإن OAI-SearchBot هو المسؤول عن إظهار المواقع في نتائج بحث ChatGPT. يمكنك حجب الأول والسماح للثاني.
هل حجب Google-Extended يخرجني من AI Overviews؟
لا. تقول Google إن Google-Extended يتحكم في استخدام المحتوى لتحسين نماذج Gemini، ولا يؤثر على الظهور في بحث Google ولا يُستخدم إشارة ترتيب.
لماذا تختلف المصادر بين سؤال وآخر متشابه؟
لأن الإجابات احتمالية ونتائج البحث التي يقرؤها المحرك تتغير. لذلك لا يُبنى قرار على سؤال واحد في يوم واحد، بل على مجموعة أسئلة ثابتة تُقاس بنفس الطريقة كل شهر.