انتقل إلى المحتوى
كل المقالات

لماذا لا تُعدّ إجابة واحدة من الذكاء الاصطناعي قياسًا

بقلم فريق Rastock AEOنُشر 6 دقائق قراءة

الإجابة الواحدة من الذكاء الاصطناعي سحبة واحدة من نظام يعطي إجابات مختلفة للسؤال نفسه، فلا تستطيع أن تخبرك كيف يصف المحرك نشاطك التجاري في العادة. القياس يحتاج إلى مجموعة ثابتة من الأسئلة، وتشغيلات متكررة، وإجابات مخزّنة، ومقارنة المثل بالمثل عبر الزمن.

يسأل أحد أفراد فريقك ChatGPT عن أفضل مزوّد في مجالك، فيرى اسمك، ويرسل لقطة شاشة إلى كل من في المكتب. وبعد أسبوع يسأل عميل السؤال نفسه فيحصل على قائمة لست فيها. لا أحد منهما مخطئ. كل منهما رأى إجابة واحدة من إجابات كثيرة ممكنة.

لماذا يحصل السؤال نفسه على إجابات مختلفة

صفحة نتائج البحث مستقرة إلى حد معقول. أما إجابة الذكاء الاصطناعي فتُكتب من جديد في كل مرة، وهناك عدة أمور قد تغيّرها.

  • عشوائية مبنية في النظام. تختار النماذج اللغوية الكلمات بقدر من المصادفة. وتقول وثائق Anthropic إنه حتى عند أكثر الإعدادات تحفظًا، قد تنتج المدخلات المتطابقة مخرجات مختلفة.
  • الصياغة. «أفضل محاسب في ليدز» و«بمن أستعين لضرائب مشروعي الصغير في ليدز» حاجة واحدة في نظر الإنسان، لكنهما قد تقودان إلى قائمتين مختلفتين.
  • البحث المباشر. حين يبحث المحرك في الويب، تتوقف الإجابة على الصفحات التي استرجعها في تلك المرة. وتصف Google ميزات الذكاء الاصطناعي لديها بأنها تجري مجموعة من عمليات البحث المترابطة خلف السؤال الواحد، فقد تختلف مجموعة الصفحات المصدر من سؤال إلى آخر.
  • الموقع الجغرافي. تقول OpenAI إن بحث ChatGPT يستخدم معلومات عامة عن الموقع الجغرافي مبنية على عنوان IP لتحسين النتائج. والسؤال الذي يُطرح في مدينة أخرى أو بلد آخر قد يُجاب عنه بشكل مختلف.
  • إصدار النموذج. يستبدل المزوّدون نماذجهم ويحدّثونها. فإجابة من الربيع قد تكون صادرة عن نموذج غير الذي يجيب اليوم، والخطط المجانية والمدفوعة قد لا تستخدم النموذج نفسه.
  • السياق الشخصي. تستطيع بعض المساعدات الاستفادة من محادثات سابقة أو تفضيلات محفوظة. والحساب الذي سبق أن ناقش شركتك ليس مراقبًا محايدًا.

ما الذي تثبته لقطة شاشة واحدة

لقطة الشاشة تثبت أن هذه الإجابة كانت ممكنة، مرة واحدة، لذلك الحساب، في ذلك المكان، بتلك الصياغة. وهذه معلومة حقيقية. فإذا أوردت الإجابة حقيقة خاطئة عنك، فهي تستحق أن تتحرك بشأنها فورًا.

أما ما لا تستطيع أن تخبرك به فهو كم مرة تظهر تلك الإجابة. لقطة جيدة لا تعني أنك تُرشَّح في العادة. ولقطة سيئة لا تعني أنك غائب في العادة. ولقطتان أُخذتا قبل تغيير في الموقع وبعده لا تستطيعان إثبات أن التغيير هو سبب الفرق، لأن الإجابة ربما كانت ستتغير على أي حال.

أخذ العينات: الطريقة الأساسية

قياس إجابات الذكاء الاصطناعي يستعير فكرة بسيطة من استطلاعات الرأي. لا تستطيع أن ترى كل إجابة يقدّمها المحرك، فتجمع عينة بطريقة متسقة وتصف ما رأيته.

  1. 1ثبّت مجموعة الأسئلة. دوّن الأسئلة التي يطرحها العملاء الحقيقيون، بكلماتهم. وأدرج أسئلة تذكر اسمك («هل [النشاط التجاري] جيد») وأسئلة لا تذكره («أفضل [خدمة] في [المدينة]»). ولا تغيّر القائمة بلا سبب وجيه، وإلا فقدت القدرة على المقارنة.
  2. 2كرّر كل سؤال. شغّل كل سؤال عدة مرات لكل محرك، في أيام مختلفة. التشغيل الواحد يخبرك بما يمكن أن يحدث. والتشغيلات المتكررة تبدأ في إظهار ما يحدث في الغالب.
  3. 3حافظ على ثبات الظروف. استخدم جلسة نظيفة بلا سجل محادثات ولا ذاكرة، ودوّن المحرك والنموذج الظاهر، ودوّن الموقع الجغرافي واللغة. وإذا غيّرت واحدًا من هذه، فسجّل ذلك.
  4. 4خزّن الإجابة كاملة. احتفظ بالنص الكامل وقائمة المصادر المستشهد بها والتاريخ والوقت. علامة صح في جدول بيانات تقول «مذكور» تضيّع التفاصيل التي ستريدها لاحقًا، مثل ما قيل بالضبط عن أسعارك.
  5. 5عُدّ بعبارات بسيطة. «مذكور في 7 من 20 تشغيلًا» عبارة أمينة وسهلة الفهم. وتجنّب تحويل عينة صغيرة إلى درجة تبدو دقيقة.

الذكر ليس هو الاستشهاد

قد يحدث في الإجابة أمران مختلفان، وينبغي تسجيل كل منهما على حدة.

مذكورمستشهَد به
ماذا يعنياسم نشاطك التجاري يظهر في نص الإجابةصفحة وُضع رابطها كمصدر للإجابة
صفحة منلا حاجة إلى صفحةموقعك أنت، أو صفحة لغيرك تتحدث عنك
ماذا يخبركالمحرك يربطك بهذا السؤالأي الصفحات قرأها المحرك فعلًا
ما الذي تتحقق منههل الوصف دقيق ومنصف؟هل الحقائق في تلك الصفحة صحيحة ومحدَّثة؟

قد تُذكر من دون أي رابط. وقد يُستشهد بموقعك في إجابة توصي بمنافس. وقد يُستشهد بصفحة عنك في أحد الأدلة بينما يُتجاهل موقعك، وهذا يخبرك من أين يأخذ المحرك حقائقه.

وأعداد الاستشهادات وحدها تحتاج إلى حذر كذلك. فتقرير استشهادات الذكاء الاصطناعي من Bing نفسها ينبّه إلى أن أرقامه لا تدل على موضع الصفحة أو ترتيبها أو دورها داخل الإجابة.

المقارنة بين قبل وبعد

الغاية من القياس في العادة أن تعرف هل أفاد التغيير. وللمقارنة المنصفة بضع قواعد.

  • خذ قياسًا أساسيًا قبل أن تغيّر أي شيء، بمجموعة الأسئلة كاملة وبتشغيلات متكررة.
  • بعد التغيير، انتظر. المحركات تحتاج إلى وقت لإعادة الزحف إلى الصفحات، ولا يعد أي محرك بجدول زمني.
  • شغّل الأسئلة نفسها، في المحركات نفسها، في الظروف نفسها، بعدد المرات نفسه.
  • قارن المثل بالمثل: هذا السؤال في هذا المحرك قبل، مقابل هذا السؤال في هذا المحرك بعد.
  • اقرأ الإجابات المخزّنة، لا الأعداد فقط. ذكرٌ انتقل من «غالي» إلى «متوسط السعر» تغيير لا يلتقطه العدّ.

الأمانة في التعامل مع التذبذب

حتى مع طريقة دقيقة، تتأرجح النتائج. فإذا ذُكرت في 6 من 20 تشغيلًا الشهر الماضي وفي 8 من 20 هذا الشهر، فقد يكون ذلك تفاوتًا عاديًا لا تقدمًا. والتحركات الصغيرة في العينات الصغيرة ينبغي أن تُذكر على أنها «لا تغيير واضح».

بضع عادات تبقي التقارير أمينة:

  • اذكر عدد الأسئلة والتشغيلات التي يقوم عليها كل رقم.
  • ابحث عن تغيرات تثبت عبر عدة جولات، لا جولة واحدة.
  • لا تدّعِ أن تعديلك هو سبب التغيير إذا حدث تحديث للنموذج في الفترة نفسها. قل إن الأمرين حدثا.
  • تذكّر حدود أي نظرة من الخارج. تذكر Google أن لا أداة من طرف آخر لديها وصول إلى أنظمة الترتيب أو أنظمة الذكاء الاصطناعي الداخلية لديها. أخذ العينات يبيّن ما قالته المحركات لك، لا لماذا قالته.
  • احتفظ بالإجابات الخام ليتمكن أي شخص من مراجعة الملخص مقابلها.

هذا هو النهج الذي يُبنى حوله Rastock AEO: أسئلة ثابتة، وتشغيلات متكررة، وإجابات مخزّنة، وفصل بين الذكر والاستشهاد. هذا القياس قيد البناء ولم يُتح بعد، والموجود هو حسابات الوصول المبكر فقط. لكن الطريقة لا تتوقف على أي أداة. قائمة أسئلة وجلسة متصفح نظيفة وجدول بيانات تكفي للبدء.

أسئلة وأجوبة

كم مرة ينبغي أن أطرح السؤال نفسه؟
لا يوجد رقم سحري، وهذا المقال لا يقدّم رقمًا. الحد الأدنى أكثر من مرة واحدة، وعدة تشغيلات في أيام مختلفة أفضل، وأيًّا كان العدد الذي تختاره فينبغي أن يبقى هو نفسه في كل جولة.
هل لقطة شاشة لإجابة ذكاء اصطناعي بلا فائدة؟
لا. هي تثبت أن تلك الإجابة كانت ممكنة، وقد تكشف حقيقة خاطئة تستحق الإصلاح. لكنها لا تستطيع أن تبيّن كم مرة تظهر الإجابة ولا هل كان تغيير أجريته هو سببها.
ما الفرق بين أن تكون مذكورًا وأن يُستشهد بك؟
مذكور يعني أن اسمك يظهر في نص الإجابة. ومستشهَد به يعني أن صفحة، لك أو لطرف آخر، وُضع رابطها كمصدر. وقد يحدث أحدهما من دون الآخر، فسجّل كلًّا منهما على حدة.
لماذا تغيّرت الإجابة وأنا لم أفعل شيئًا؟
تتفاوت الإجابات بسبب العشوائية المبنية في النظام، واختلاف الصفحات المسترجعة، والموقع الجغرافي، وتحديثات النماذج، والسياق الشخصي. والتغير من دون أي إجراء منك أمر طبيعي، وهو السبب في أنه لا ينبغي تحميل الإجابة الواحدة أكثر مما تحتمل.

المصادر

  1. Glossary: Temperature (Claude Platform Docs, Anthropic)
  2. ChatGPT search (OpenAI Help Center)
  3. Optimizing your website for generative AI features on Google Search (Google Search Central)
  4. Introducing AI Performance in Bing Webmaster Tools Public Preview (Bing Webmaster Blog)
مشاركةLinkedInX

اعرف ما يقوله الذكاء الاصطناعي عن نشاطك التجاري.

احصل على وصول مبكر

مقالات أخرى