الحاجة نفسها بصياغة أخرى: المساعد يغيّر معظم قائمته

الجواب المختصر: اسأل ChatGPT عن أفضل السبّاكين في مدينتك، ثم اسأله عن أكثر السبّاكين الموصى بهم في مدينتك. الحاجة واحدة، والقائمة ليست واحدة. في 682 زوجًا من الإجابات لم يحتفظ إلا بـ16 إلى 29% من الشركات التي ذكرها للتو، وفي ربع إلى نصف الحالات لم يحتفظ بأي منها.

تريد أن تعرف إن كان الذكاء الاصطناعي يوصي بك. السؤال يفترض وجود قائمة، ومكان في تلك القائمة. قياساتنا تقول غير ذلك: ما يوجد هو إجابة، وهي ملتصقة بالجملة التي كُتبت بالضبط. غيّر الجملة دون تغيير الحاجة، فيجيب المساعد نفسه، في اليوم نفسه، عن المدينة نفسها والمهنة نفسها، بشركات أخرى في معظمها. مساعد واحد كان الاستثناء: وهو بالضبط الذي ذهب يبحث في الويب.

المكان في القائمة ليس مرتبة. إنه جواب على جملة واحدة.

ما الذي قيس

تطرح دراسات Waseit الثماني، في كل مدينة وكل مهنة، صياغتين للحاجة نفسها: «ما أفضل {المهنة} في {المدينة}؟» ثم «اذكر {المهنة} الأكثر توصية في {المدينة} واشرح لماذا». حتى الآن كنا نقارن المساعدين بعضهم ببعض. هذه المرة نقارن كل مساعد بنفسه، على إجابتيه. احتفظنا بالأزواج التي تذكر فيها الإجابتان شركة واحدة على الأقل: 3729 زوجًا، و8 بلدان، و89 مدينة، و148 ثنائية بلد-مهنة، جُمعت بين 31 يوليو و16 أكتوبر 2026، في كل مرة بلغة البلد. ولمقارنة المساعدين الثلاثة بعضهم ببعض اقتصرنا على فرنسا والمملكة المتحدة والبرازيل، وهي البلدان الوحيدة التي أجاب فيها الثلاثة: 2044 زوجًا، نحو 681 لكل مساعد.

لمطابقة أسماء الشركات لا توجد قاعدة بديهية: «Poilâne» و«Boulangerie Poilâne» الدار نفسها، أما «Table de l'Ours» و«Table de l'Olivier» فلا. لذلك نعطي حدّين بدل رقم واحد. الحدّ الصارم لا يطابق إلا الأسماء المتطابقة بعد التوحيد؛ وهو يقلّل مما جرى الاحتفاظ به. والحدّ الواسع يطابق بمجرد اشتراك كلمة مميزة، بعد استبعاد كلمات المهن وأسماء المدن؛ وهو يطابق أكثر مما ينبغي عن قصد. الحقيقة بينهما، ولا ننشر إلا ما يصمد في الحالتين.

ماذا يبقى من القائمة حين يُعاد صوغ السؤال

يذهب معظمها. يحتفظ ChatGPT بـ16 إلى 29% من شركات إجابته الأولى، وGemini بـ12 إلى 28%. بعبارة أخرى، نحو ثلاثة أرباع القائمة تتبدل حين تتغير جملة الطلب دون أن يتغير معناه. وكثيرًا ما لا يبقى شيء البتة: إعادة صياغة من أربع لدى ChatGPT بالمطابقة الواسعة، وواحدة من اثنتين بالمطابقة الصارمة. أما الشركة الموضوعة في الصدارة فتصمد أقل: يبقيها ChatGPT هناك في 11 إلى 19% من الأزواج، وGemini في 6 إلى 11%.

يتميز مساعد واحد بوضوح، وهو نفسه في المطابقتين: يحتفظ Perplexity بـ37 إلى 50% من قائمته ويعيد الشركة نفسها إلى الصدارة ثلاث مرات أكثر من Gemini. وهو أيضًا الوحيد من الثلاثة الذي جلب صفحات من الويب قبل الإجابة؛ أما ChatGPT وGemini فاستُفسرا عبر واجهة البرمجة الخاصة بهما، دون بحث. في المقابل، الفارق بين ChatGPT وGemini لا يصمد أمام تغيير المطابقة (29% مقابل 28% في الواسعة): ولا نفاضل بينهما.

ما الذي يتغير إن كنت أنت الشركة

تحقّق واحد لا يثبت شيئًا. إن كتبت مرة واحدة مهنتك ومدينتك في ChatGPT فظهر اسمك، فقد عرفت أمرًا صحيحًا وضيقًا جدًا: تلك الجملة، في ذلك اليوم، أظهرتك. والجملة المجاورة، التي تعني لعميلك الشيء نفسه، قد تتركك خارجًا. لذلك لا تُقاس مرتبة، بل يُقاس تواتر عبر عدة طرق للسؤال. وهذا يفسّر أيضًا المنافس الذي يقسم أنه «يخرج أولًا دائمًا»: لقد حفظ الصياغة التي تُخرجه. سبق أن أظهرنا أن مساعدَين نادرًا ما يعطيان الجواب نفسه؛ والمساعد نفسه، إن سُئل مرتين، لا يجيب نفسه بالمثل أيضًا.

وشركتك، ماذا يقول عنها المساعدون

هذا بالضبط ما يفعله التدقيق المجاني من Waseit: لا يطرح سؤالًا واحدًا بل ثمانية، هي الأسئلة التي يكتبها عملاؤك فعلًا، بلغتهم ولمدينتك، على ChatGPT وGemini، إضافة إلى اختبار شهرة يفصل بين «الذكاء الاصطناعي لا يعرفك» و«يعرفك ولا يوصي بك». في نحو 60 ثانية ترى درجة من 100، والمنافسين المذكورين مكانك، والأسئلة التي لا تظهر فيها، وأي المساعدين بحث فعلًا في الويب بدل أن يجيب من الذاكرة. مجاني، بلا حساب وبلا بطاقة؛ وعنوان بريد إلكتروني يفتح فقط أسماء المنافسين وخطة العمل. إنها صورة مؤرخة لا ترتيب: هذا المقال يدور تحديدًا حول مقدار تحرك الإجابات، ولا نعد بأي مرتبة.

ما لا يثبته هذا

• لمطابقة أسماء الشركات لا قاعدة واحدة، ولذلك نعطي حدّين. الواسع يطابق أكثر مما ينبغي عن قصد: فهو يجمع «Table de l'Ours» و«Table de l'Olivier» لاشتراكهما في كلمة. والصارم يفصل «Poilâne» عن «Boulangerie Poilâne». الرقم الحقيقي بينهما، ولم نحتفظ إلا بالنتائج الصحيحة في الحالتين.
• بالمطابقة الواسعة يفصل بين ChatGPT وGemini نقطة واحدة: لا نفاضل بينهما، ولا يقول هذا المقال أيهما أثبت. الذي يصمد في الحدّين هو فارق Perplexity عن الاثنين الآخرين فحسب.
• إجاباتنا المحفوظة لا تبقي إلا أول ثماني شركات مذكورة. فنحن إذًا نقارن قوائم قصيرة، لا كل ما كان يمكن للمساعد ذكره: قد تشترك إجابتان في اسم تاسع لا نراه أبدًا.
• صياغتان فقط، طُرحت كل منهما مرة واحدة، ضمن جمع واحد بين 31 يوليو و16 أكتوبر 2026. وهذا ليس قياسًا لما يتغير من يوم إلى آخر، وتلك مسألة أخرى.
• في هذا الجمع لم يجب Perplexity إلا في فرنسا والمملكة المتحدة والبرازيل، فمقارنة المساعدين الثلاثة تقتصر على هذه البلدان. وكونه بحث في الويب يرافق ثباته دون أن نكون قد أثبتنا أنه السبب.
• عددنا تبدّل الأسماء لا الأخطاء. لا شيء هنا يقول إن إحدى القائمتين أفضل من الأخرى، ولا إنها أقرب إلى الشركات التي تخدم المدينة فعلًا. كما أن الاستخراج الآلي للأسماء قد يأخذ معيارًا أو منصة على أنها شركة، وهو ما قاسته أعدادنا السابقة.