«الأول في الذكاء الاصطناعي»: المركز يصمد، لكن ثمة واحد لكل لغة ولكل محرك
خمس مرات للسؤال نفسه: العلامة المذكورة أولًا تبقى هي هي في 81 % من الحالات. المشكلة ليست الثبات، بل أنه لا وجود لمركز أول واحد.
81 %
من التركيبات تحافظ على العلامة نفسها أولًا عبر خمسة تشغيلات متطابقة
في هذا المقال
الجواب المختصر: المركز الأول ثابت إلى حدّ بعيد، وهذا بالضبط ما يجعل عبارة «نحن الأوائل في الذكاء الاصطناعي» مضلِّلة. اطرح السؤال نفسه خمس مرات: العلامة المذكورة أولًا لا تتغير في 81 % من الحالات. لكن غيّر اللغة أو المحرك، ولن تكون العلامة نفسها.
مرتبة واحدة
وسيط تنقّل العلامة بين تشغيلين - واحدة من كل اثنتين لا تتزحزح البتة
100
تشغيل، دون أي إخفاق: 4 قطاعات × لغتان × محركان، خمس مرات لكل تركيبة
في استضافة المواقع تتصدّر Hostinger بالإنجليزية والفرنسية والإسبانية - وIONOS بالألمانية، على المحركين معًا. وفي المدفوعات هي Stripe في كل مكان تقريبًا، غير أن Redsys تظهر بالإسبانية لدى Gemini. وفي حجز الفنادق يضع Perplexity Booking.com أولًا ويضع Gemini Google Travel، في اليوم نفسه وباللغة نفسها.
لا يوجد مركز أول واحد. بل واحد لكل لغة ولكل محرك، ولا شيء يضمن أن يتشابها.
ما الذي قِسناه
السؤال المرجعي نفسه الذي تستعمله كل قياساتنا منذ 23 أغسطس، مطروحًا خمس مرات متتالية لكل تركيبة. أربعة قطاعات عالمية، ولغتان، ومساعدان يبحثان. 100 تشغيل، دون أي إخفاق. ولا يتغير شيء بين تشغيلين: لا القطاع، ولا اللغة، ولا المحرك، ولا اليوم. وحدها عشوائية المساعد تتكلم.
التنقية تسبق الترتيب، وليست تفصيلًا. فمستخرِجنا ما زال يمرّر شذرات ليست أسماء شركات. وإن حلّت في المركز الأول صنعت اضطرابًا هو اضطرابنا نحن لا اضطراب المحرك. لذلك نُبقي فقط الأسماء التي تتكرر، ثم نرتّب بعد ذلك.
المركز الأول يصمد
| المقياس | خام | بعد تصحيح التسميات |
|---|---|---|
| تركيبات تحافظ على العلامة نفسها أولًا | 12/16 (75 %) | 13/16 (81 %) |
| علامات لا تتزحزح مرتبةً واحدة | 50 % | 50 % |
| وسيط تنقّل العلامة | مرتبة واحدة | مرتبة واحدة |
| أكبر تنقّل مرصود | خمس مراتب | خمس مراتب |
علامة من كل اثنتين تحتلّ المرتبة ذاتها تمامًا في كل مرة يُعاد فيها السؤال. ووسيط التنقّل مرتبة واحدة. وخلافًا لما يُقال كثيرًا، هذا الترتيب ليس قرعة.
حصلنا أولًا على 38 %، وكان رقمًا خاطئًا: إذ كانت شذرات مثل «small teams» أو «performance» تحتلّ المركز الأول. والتنقية قبل الترتيب تعطي 75 %، ثم 81 % بعد دمج «hubspot crm» و«hubspot»، وهما اسمان لشركة واحدة. فالاضطراب الذي كدنا ننشره كان اضطرابنا نحن.
لكن المراكز الأولى ثمانية لا واحد
| القطاع | Perplexity | Gemini |
|---|---|---|
| المدفوعات (en وfr) | Stripe | Stripe |
| حجز الفنادق (en) | Booking.com | Google Travel |
| حجز الفنادق (fr) | Booking.com | Booking.com |
| استضافة المواقع (en وfr) | Hostinger | Hostinger، إلا بالإنجليزية |
| إدارة علاقات العملاء (en) | HubSpot | HubSpot |
| إدارة علاقات العملاء (fr) | لا متصدّر ثابت | لا متصدّر ثابت |
وقياس 24 أغسطس، على لغات أكثر، يمدّ الجدول. فبـالألمانية ليست الاستضافة المذكورة أولًا هي Hostinger ولا أي لاعب عالمي، بل IONOS - على المحركين معًا. ويصفها Perplexity بالحرف «in mehreren Vergleichen auf Platz 1 bzw. Testsieger». وبـالإسبانية يُبرز Gemini في المدفوعات Redsys - شبكة المصارف الإسبانية - «muy utilizada en el mercado español». والشركتان كلتاهما غائبتان عن سائر اللغات.
مزوّد استضافة ألماني هو الأول في ألمانيا. وهو غير موجود بالإنجليزية. والعبارتان صحيحتان في آن واحد.
حالة إدارة علاقات العملاء بالفرنسية
هي التركيبة الوحيدة في قياسنا التي لا تحتفظ فيها أي علامة بالمركز الأول. فعلى Gemini تعطي خمسة تشغيلات للسؤال نفسه ثلاثة أوائل مختلفين: Freshsales وHubSpot وmonday. وعلى Perplexity تتناوب Pipedrive مع تسمية ليست شركة أصلًا.
لا متصدّر هناك يُزاح، وهذه معلومة تجارية: ففي تلك السوق المركز الأول شاغر. أما في غيرها - Stripe في المدفوعات، وHostinger في الاستضافة الإنجليزية - فتشغله العلامة نفسها في كل تشغيل.
ماذا تفعل بهذا
عبارة «نحن الأوائل في ChatGPT» ليست كاذبة، بل ناقصة.
الأوائل بأي لغة، وعلى أي محرك، وبأي صياغة؟ وبدون هذه الثلاثة لا تقبل التحقق.
لا تنقل مركزًا أول من سوق إلى أخرى.
فالتصدّر بالإنجليزية لا يقول شيئًا عن الألمانية، حيث قد يشغل المركز لاعب وطني - ويشغله على المحركين معًا.
انظر هل القمة محروسة قبل أن تهاجمها.
فإن عادت العلامة نفسها في كل تشغيل، كان المركز الأول جدارًا؛ وإن تغيّرت في كل مرة، كما في إدارة علاقات العملاء بالفرنسية، فهو مفتوح.
تشغيل واحد لا يُثبت مرتبة.
نصف العلامات لا يتزحزح، والنصف الآخر يتزحزح - حتى خمس مراتب في قياسنا. والمرتبة تُثبت عبر تكرارات عدة، لا عبر لقطة شاشة.
الحدود
أربعة قطاعات ولغتان ومحركان في الجزء المكرَّر.
وأحذية الجري مستبعدة: فالإجابات فيها تذكر طُرزًا مرقّمة يستبعدها مستخرِجنا، ما ينتج شيئًا ليس نتيجة.
والجدول الموسَّع إلى الألمانية والإسبانية مصدره مجموعة 24 أغسطس
، بتشغيل واحد لكل تركيبة. وهو يُظهر أن المتصدّر يختلف باختلاف اللغة، لكنه لا يُثبت ثباته في تلك اللغات، لانعدام التكرار.
ومستخرِجنا يبقى ناقصًا
، وقد بقيت شذرة في صدارة إحدى التركيبات حتى بعد التصحيح. ننشر الحسابين لا حسابًا واحدًا، ونسمّي ما تبقّى.
و«الأول» هنا تعني: المذكور أولًا في نص الإجابة.
وليست ترتيبًا ينشره المحرك، بل ترتيب تعداده. ولا ننسب إليه نية ترتيب المراتب.
نحن لا نعد أحدًا بمكان في إجابات ChatGPT - ولا أحد يستطيع ذلك بنزاهة. وما يمكن قياسه هو أين أنت: بحسب اللغة، وبحسب المحرك، وبحسب السؤال المطروح. حتى حين يكون الجواب: «المكان محجوز، ولمن لا تظنّه».