robots.txt التحقق
اقرأ قواعد الزحف إلى الموقع واختبر ما إذا كان بإمكان الزاحف الوصول إلى المسار المستهدف.
robots.txt التحقق دليل المستخدم
- املأ المعلمات أو حدد الملف وفقًا للنموذج ، وتحقق من الوحدة والتنسيق أولاً.
- حدد baiduuspider لاختبار / news / path.
- انقر فوق الزر معالجة لعرض النتائج ، يمكنك نسخها أو تنزيلها وحفظها.
طريقة الحساب وقواعد المعالجة
قراءة robots.txt ومطابقة الإذن وحظر القواعد بواسطة وكيل المستخدم ومطابقة المسار.
نطاق الاستخدام
تتحكم الروبوتات في الزحف ، ولا تساوي ما إذا كانت الصفحة مفهرسة.
هل سيتم حفظ محتوى الإدخال على الخادم؟
ترسل هذه الأداة شروط الاستعلام إلى واجهة هذا الموقع للحصول على النتائج ؛ يرسل رقم الهاتف المحمول أول شريحة رقمية مكونة من 7 أرقام فقط.
لماذا قد تكون النتيجة مختلفة عن الأدوات الأخرى؟
تتحكم الروبوتات في الزحف ، ولا تساوي ما إذا كانت الصفحة مفهرسة. يرجى مقارنة وحدة الإدخال وطريقة التقريب والقواعد المعمول بها وإصدار البيانات أولاً.