1227 طلبًا إلى llms.txt وصفر روبوت ذكاء اصطناعي: لا يوجد ملف تضعه
روبوتات الذكاء الاصطناعي تأخذ آلاف الصفحات مقابل كل زائر تعيده، والملف الذي يفترض أن يخاطبها لا يقرأه أي منها. ما تقوله القياسات المنشورة.
0 من 1227
طلبات إلى llms.txt واردة من روبوت تابع للمختبرات الكبرى، في دراسة لسجلات الخوادم
في هذا المقال
الجواب المختصر: الظهور في إجابات الذكاء الاصطناعي لا يُضبط بإعداد تقني. قياسان يقولان ذلك معًا. فمن جهة، تأخذ روبوتات النماذج الكبيرة مئات إلى آلاف الصفحات مقابل كل زائر تعيده. ومن جهة أخرى، فإن ملف llms.txt الذي بدأ القطاع بوضعه في جذر المواقع لا يطلبه أي روبوت موثق من المختبرات الكبرى، وتعلن جوجل أنها تتجاهله. لا يوجد باب خلفي: ما يُحسم يُحسم داخل المدونة.
3389 : 1
الصفحات التي يأخذها روبوت Mistral مقابل كل زائر يعيده (Cloudflare Radar، يوليو 2026)
لا شيء
من ارتباط مقيس بين نشر llms.txt وبين الاقتباس، على نحو 300 ألف نطاق
لا يوجد ملف تضعه في الجذر لتكون موجودًا داخل إجابة ذكاء اصطناعي. الظهور يُكتسب داخل المدونة، ولا يُعلن.
التبادل غير متوازن، ويمكن عدّه
تنشر Cloudflare مؤشرًا بسيطًا وقاسيًا: النسبة بين عدد الصفحات التي تأتي منصة ذكاء اصطناعي لقراءتها على موقع، وعدد الزوار الذين تعيدهم إليه. التعريف آلي. تُحصى طلبات HTML الواردة من وكلاء منصة ما، وتُقسم على طلبات HTML التي يحمل ترويسة الإحالة فيها اسم تلك المنصة.
| المنصة | الصفحات المأخوذة مقابل زائر معاد |
|---|---|
| Mistral | 3389 : 1 |
| Anthropic | 2237 : 1 |
| OpenAI (GPTBot) | 217 : 1 |
| DuckDuckGo | 2.5 : 1 |
رتبة المقدار أهم من الكسر العشري، وقد تحركت كثيرًا في 2026: كانت نسبة Anthropic تُعد بعشرات الآلاف في الربع الأول قبل أن تهبط إلى بضعة آلاف في الصيف. الاتجاه صحيح، والاختلال باقٍ كما هو. وبالنسبة لموقع، يعني ذلك أن القراءة الآلية صارت هي القاعدة، بينما تصير الزيارة البشرية التي كانت تمولها هي الاستثناء.
تنبيه تورده Cloudflare نفسها وكثيرًا ما يسقط في النقل: حركة الإحالة القادمة من تطبيق Claude الأصلي لا تحمل ترويسة إحالة. تلك الإحالات غير مرئية إذن في المقام، وتكتب Cloudflare أن نسبها قد تبالغ في تقدير الاختلال، دون أن تستطيع تحديد المقدار. يبقى اتجاه النتيجة قائمًا، أما دقتها فلا.
الملف الذي لا يقرأه أحد
أمام هذا الاختلال، طرح القطاع جوابًا بسيطًا: llms.txt، ملف يوضع في جذر الموقع ليخبر النماذج بما تقرأ وكيف. الفكرة مغرية. لكن فيها عيبًا واحدًا: الروبوتات لا تطلبه.
سجلت دراسة لسجلات الخوادم أُجريت من سبتمبر 2025 إلى أبريل 2026 على نحو 900 نطاق 1227 طلبًا لهذه الملفات، ولا واحدًا منها من روبوت موثق تابع للمختبرات الكبرى - لا GPTBot ولا ClaudeBot ولا PerplexityBot ولا Google-Extended. أما الطالبون فكانوا مجمّع بيانات تجاريًا بـ794 طلبًا أي 64.7%، ومتصفحات بشرية بـ392 أي 31.9%. بعبارة أخرى: من يقرأ الملف هم من يبيعون أدوات حوله، والفضوليون.
أما معدل التبني فيتوقف كليًا على من تنظر إليه، ولهذا يُقرأ الشيء ونقيضه.
| العينة المقيسة | التبني |
|---|---|
| مجموعة من 218 مضيفًا موجهة للمطورين (أغسطس 2026) | 51.8% |
| أعلى 1000 في Tranco، الجذور القابلة للوصول (يونيو 2026) | 15.8% |
| نحو 300 ألف نطاق (نوفمبر 2025) | 10.13% |
| أعلى 1000 في Tranco، الإجمالي (يونيو 2026) | 8.7% |
وفي السؤال الذي يحسم كل شيء، لا تجد دراسة الارتباط التي أُجريت على نحو 300 ألف نطاق أي ارتباط قابل للقياس بين نشر هذا الملف وبين الاقتباس من قبل النماذج. بل إن إزالة المتغير حسّنت دقة النموذج الإحصائي، وهي الطريقة المهذبة للقول إنه كان يضيف ضجيجًا.
ما تقوله جوجل رسميًا
الموقف غير ملتبس. توثيق جوجل، المحدَّث في يونيو 2026، يذكر أن الملف لا أثر له، لا إيجابيًا ولا سلبيًا، على الترتيب في البحث ولا في AI Overviews، وأن البحث يتجاهله ببساطة. أما فريق Chrome فأضاف في مايو 2026 فحصًا لـllms.txt إلى Lighthouse، لكن ضمن تدقيقات التصفح الوكيلي لا ضمن تدقيقات السيو، وهو لا يبلغ إلا عن خطأ في الخادم، ولا يبلغ أبدًا عن غياب الملف.
هذا التصنيف يقول الكثير: يُعامل الملف بوصفه شيئًا موجهًا لوكلاء يجوبون الويب نيابة عن مستخدم، لا بوصفه إشارة ترتيب. وضعه لا يكلف شيئًا تقريبًا ولا يضر. غير أنه لا ينبغي انتظار ظهور منه.
لماذا لا يوجد ملف تضعه
القياسان يجيب أحدهما الآخر. فالنماذج تقرأ الويب المفتوح على نطاق واسع، وصفحاتك ضمنه، وتفعل ذلك دون المرور بباب فتحته أنت. وما تحتفظ به عنك لا يأتي إذن من إعلان أدليت به في جذر نطاقك، بل مما يُقال عنك عبر مدونة لا تتحكم فيها.
وهذا هو الامتداد الدقيق لما تظهره المقارنة بين المحركات: إنها لا تقرأ المصادر نفسها، ومع ذلك تتفق أكثر بكثير على الأسماء التي توصي بها. ولا يستطيع ملف إعدادات شيئًا حيال ذلك، في أي من الاتجاهين. ما يزن هو اتساق ما هو مكتوب عنك، في كل مكان، وإمكان أن تنسبه آلة.
نسبة الزحف لقطة لحظية لا ثابت.
أرقام Cloudflare تتحرك من شهر لآخر وهبطت رتبة مقدار كاملة خلال 2026. ومقارنة رصد يوليو برصد مارس لا معنى لها، ونحن لم نقسها بأنفسنا.
تحذر Cloudflare من أن نسبها هي نفسها قد تبالغ في تقدير الاختلال.
فإحالات تطبيق Claude الأصلي لا ترسل ترويسة إحالة وتغيب بذلك عن المقام. الشركة تقول ذلك وتوضح أنها تجهل حجم التحيز: ننقل التحذير مع الرقم.
دراسة سجلات الخوادم صغيرة.
1227 طلبًا على نحو 900 نطاق: يكفي لملاحظة أن أي روبوت من المختبرات الكبرى لا يظهر هناك، ولا يكفي للجزم بأن أيًا منها لن يفعل أبدًا، ولا للحديث باسم الويب كله.
معدلات التبني غير قابلة للمقارنة فيما بينها.
من 8.7% إلى 51.8% بحسب العينة، للشيء نفسه: الفارق في المجتمع المرصود لا في تطور زمني. ومقال يذكر واحدًا منها فقط، دون أن يقول أيها، لا يعلمك شيئًا.
ما الذي يتغير
لا تعوّل على ملف.
وضع llms.txt زهيد وغير ضار، لكن لا قياس منشور يربطه باقتباس. ليس رافعة ظهور، وهو في أحسن الأحوال مجاملة لوكلاء لم يوجدوا بعد.
اقرأ سجلاتك أنت.
استعلام واحد يخبرك أي الروبوتات تأتي إلى موقعك، وبأي وتيرة، وماذا تطلب. إنه المعطى الوحيد في هذا الملف الذي يمكنك إنتاجه بنفسك، وهو خير من متوسط عالمي.
قرر ما الذي تسمح بأخذه.
النسبة بين الصفحات المقروءة والزوار المعادين تفاوض لا قدر. والسماح لوكيل أو إبطاؤه أو حجبه قرار تجاري يخصك، ويُتخذ روبوتًا روبوتًا.
قِس الاقتباس لا الامتثال.
كون المربعات التقنية مؤشرة لا يقول شيئًا عن حضورك في إجابة. يبقى السؤال المفيد: هل يخرج اسمك، وعلى أي محرك، وإلى جانب من.