شعار MyVIPWebTools

أداة اختبار Robots.txt — اختبار الروابط مقابل أي ملف Robots.txt

تتحقق أداة اختبار Robots.txt لدينا مما إذا كان مسار معين مسموحًا أو محظورًا وفقًا لقواعد ملف robots.txt، مطبّقةً بشكل صحيح نفس أولوية 'أطول تطابق يفوز' التي تستخدمها الزواحف الحقيقية لمحركات البحث. الصق محتوى robots.txt مباشرةً، أو بدّل إلى الوضع المباشر لجلب ملف robots.txt الفعلي لأي موقع عام من جانب الخادم. أدخل مسارًا وuser-agent اختياريًا، وشاهد بالضبط أي قاعدة تطابقت ولماذا.

الصق محتوى robots.txt وأدخل مسارًا لاختباره.

كيفية استخدام أداة اختبار Robots.txt — التحقق مما إذا كان الرابط مسموحًا أو محظورًا

  1. 1

    اختر وضع 'لصق' للصق محتوى robots.txt مباشرةً، أو وضع 'مباشر' لجلبه من موقع حقيقي.

  2. 2

    في الوضع المباشر، أدخل رابط الموقع وانقر 'جلب' لتحميل محتوى robots.txt الفعلي.

  3. 3

    أدخل المسار الذي تريد اختباره واختياريًا user-agent محدد مثل 'Googlebot'.

  4. 4

    راجع نتيجة مسموح/محظور وشاهد بالضبط أي قاعدة في الملف تطابقت، بناءً على نفس قواعد التحديد التي تستخدمها الزواحف الحقيقية.

لماذا تستخدم أداة اختبار Robots.txt — التحقق مما إذا كان الرابط مسموحًا أو محظورًا؟

يمكن أن تتعارض قواعد robots.txt بصمت — دمج 'Disallow: /' واسع مع 'Allow: /public/' أكثر تحديدًا لاحقًا في الملف أمر صالح وشائع، لكن من السهل الحكم بشكل خاطئ على القاعدة التي تفوز فعليًا لرابط معين دون معرفة منطق الأولوية في المواصفات. قراءة ملف robots.txt يدويًا وتخمين النتيجة عرضة للخطأ، خاصة عبر مجموعات User-agent متعددة وأنماط حرف بدل. تُطبّق هذه الأداة خوارزمية الأولوية الحقيقية التي تستخدمها الزواحف وتُظهر بالضبط أي قاعدة تطابقت، مما يُزيل التخمين.

الأسئلة الشائعة

أدوات ذات صلة

أداة اختبار Robots.txt — التحقق مما إذا كان الرابط مسموحًا أو محظورًا | MyVIPWebTools