إجابات الذكاء الاصطناعي

الفرق بين llms.txt وrobots.txt: وظيفة كل ملف وأيهما تحتاج

آخر تحديث · الناشر: AMA CLASS, K.K. (بالإنجليزية)

الخلاصة

يتحكم ملف robots.txt في عناوين URL التي يُسمح للزواحف بجلبها، وتستخدمه محركات البحث منذ سنوات. أما llms.txt فمقترح أحدث: ملخص لموقعك بصيغة Markdown لأدوات الذكاء الاصطناعي. تقول Google إن بحث Google لا يستخدم llms.txt، فهو لا يفيد ظهورك فيه ولا يضره. افحص robots.txt أولًا. واعتبار llms.txt اختياريًا هو رأينا.

ماذا يفعل robots.txt

ملف robots.txt ملف نصي عادي في المستوى الأعلى من موقعك، مثل https://www.example.com/robots.txt وتقول Google إنه يخبر الزواحف بعناوين URL التي يمكنها الوصول إليها، وإنه يُستخدم أساسًا لإدارة حركة الزحف.

وهو ليس وسيلة لإبقاء صفحة خارج Google. تشير Google إلى noindex أو الحماية بكلمة مرور لهذا الغرض، لأن عنوان URL المحظور قد يظهر رغم ذلك إذا ربطت إليه مواقع أخرى. وتذكر Google أيضًا أن الزواحف الموثوقة تتبع القواعد، لكن غيرها قد لا يتبعها.

ما هو llms.txt

ملف llms.txt مقترح نُشر على llmstxt.org في سبتمبر 2024. يصف ملفًا بصيغة Markdown يقدم لأدوات الذكاء الاصطناعي دليلًا قصيرًا ومنتقى للموقع. الجزء الإلزامي الوحيد عنوان رئيسي باسم الموقع، ومن الأجزاء الاختيارية ملخص من سطر واحد وقوائم روابط.

المقترح مفتوح لمساهمات المجتمع، فاقرأه كاقتراح قيد النقاش لا كمعيار مستقر. هذه قراءتنا نحن.

كيف يختلف الملفان

يقول مقترح llms.txt نفسه إن للملفين غرضين مختلفين: يحدد robots.txt ما هو مقبول من الوصول الآلي، بينما يُقصد بـ llms.txt أن يُقرأ عند الطلب حين تحتاج أداة ذكاء اصطناعي إلى معلومات لمساعدة مستخدم.

  • robots.txt: قواعد للوصول. تقرؤه زواحف محركات البحث والذكاء الاصطناعي. الخطأ فيه قد يوقف زحف محركات البحث إلى موقعك
  • llms.txt: ملخص للمحتوى. لا يستخدمه بحث Google. الخطأ فيه يعني غالبًا ملخصًا قديمًا
  • خريطة الموقع: قائمة بالصفحات التي تريد العثور عليها. يقول المقترح إن خريطة الموقع لا تؤدي وظيفة llms.txt

ماذا تقول Google عن llms.txt

يقول دليل Google لميزات الذكاء الاصطناعي التوليدي إنك لا تحتاج إلى ملفات جديدة قابلة للقراءة آليًا، أو ملفات نصية للذكاء الاصطناعي، أو Markdown للظهور في بحث Google، لأن بحث Google لا يستخدمها. ويضيف أن إنشاء ملف llms.txt لخدمات أخرى أمر لا بأس به، وأنه لن يضر ظهورك أو ترتيبك في بحث Google ولن يفيده.

ولكي تكون الصفحة مؤهلة لميزات الذكاء الاصطناعي في بحث Google، تقول Google إنها يجب أن تكون مفهرسة ومؤهلة للظهور مع مقتطف، وألا يكون الموقع مستبعدًا في إعداد الذكاء الاصطناعي التوليدي للبحث في Search Console.

ماذا تفحص اليوم

الترتيب توصية منا، وبند واحد اليوم يكفي.

  • افتح yoursite.com/robots.txt وابحث عن «Disallow: /» تحت «User-agent: *». وتحقق أيضًا من وجود مجموعة خاصة بـ Googlebot، إذ تستخدم Google المجموعة المطابقة الأكثر تحديدًا. اسأل المسؤول عن موقعك عن سبب أي حظر غير متوقع قبل تغييره
  • ابحث عن اسم نشاطك وتأكد من ظهور صفحاتك
  • إن كنت لا تزال تريد llms.txt، فأبقه متوافقًا مع صفحاتك وحدد من يحدّثه

لا يحتوي موقعنا نحن على llms.txt حتى 8 نوفمبر 2026. سنضيفه إذا طلبته في وثائقها الرسمية خدمة نعتمد عليها.

أين نقع نحن

Get1pct خدمة ترسل حتى ثلاثة إصلاحات محددة في الأيام التي توجد فيها أفكار مناسبة، ومنها فحوص مثل هذه. ولا تستطيع أن تعد بمكان في إجابات الذكاء الاصطناعي. راجع الإرشادات في هذه الصفحة لمعرفة التوفر والشروط الحالية. ويمكنك أيضًا ترك بريدك الإلكتروني لتلقي إشعار واحد عند التوفر.

المصادر