Comprobación de robots.txt
Lea las reglas de rastreo del sitio y pruebe si el rastreador puede acceder a la ruta de destino.
Comprobación de robots.txt manual de usuarios
- Complete los parámetros o seleccione el archivo de acuerdo con el formulario, y primero verifique la unidad y el formato.
- Seleccione BaiduUspider para probar la ruta /news/.
- Haga clic en el botón Procesamiento para ver los resultados, puede copiar o descargar y guardar.
Método de cálculo y reglas de procesamiento
Lectura de robots.txt y coincidencia de permisos y prohibición de reglas por proxy de usuario y coincidencia de ruta.
Ámbito de uso
Los robots controlan el rastreo, no igual a si la página está indexada.
¿Se guardará el contenido de entrada en el servidor?
Esta herramienta envía las condiciones de consulta a la interfaz de este sitio para obtener resultados; El número de teléfono móvil solo envía el primer segmento de 7 dígitos.
¿Por qué el resultado puede ser diferente de otras herramientas?
Los robots controlan el rastreo, no igual a si la página está indexada. Compare primero la unidad de entrada, el método de redondeo, las reglas aplicables y la versión de datos.