Resultados de búsqueda web de Baidu Robots en línea

Hoy al mediodía Baidu accidentalmente fuera de Taobao. Se encontró que el sistema no puede proporcionar una descripción del contenido de esta página debido a la instrucción de restricción en el archivo robots.txt de este sitio web. A continuación, Du Niang emitió un anuncio.
¿Alguna vez se ha encontrado con el fenómeno de que las páginas web individuales no se muestran resumidas en los resultados de búsqueda de Baidu, o se ha producido el problema de que parte del contenido del sitio web no se incluye? El sitio web puede configurar el archivo robots.txt para que se le indique que ambos casos ocurren. Con el fin de hacer que el webmaster sea más conveniente para entender si la página del sitio web en el problema anterior se debe a la configuración de robots, los resultados de búsqueda de la página web de Baidu en línea robots.txt archivo de solicitud. Cuando el sitio web utiliza el archivo robots.txt para prohibir Baidu incluir parte o todo el contenido del sitio web, Baidu dará robots.txt en los resultados de búsqueda, para que el webmaster entienda oportunamente la razón de que el sitio web no se muestre resumen en los resultados de búsqueda, al mismo tiempo puede hacer clic en los resultados de búsqueda en "Aprender más detalles", para ver la información detallada de robots del sitio web, confirmar si es debido a la configuración errónea de robots.txt causada por el bloqueo.
Introducción de robots.txt: robots.txt es el primer archivo que un motor de búsqueda ve cuando visita un sitio web. Este archivo se utiliza para especificar el alcance de rastreo de una araña en ese sitio web. Algunos sitios web utilizan el archivo robots.txt para bloquear parte o todo el contenido del sitio web debido al contenido que no quieren ser incluidos en el motor de búsqueda. Si el sitio web establece el archivo robots.txt para Baidu Spider, Baidu seguirá el protocolo de robots y no rastreará los resultados de bloqueo, pero teniendo en cuenta la demanda de los usuarios de buscar la dirección del sitio web en el motor de búsqueda, los resultados de búsqueda mostrarán el título y la dirección del sitio web de acuerdo con la demanda de búsqueda, pero no mostrarán el resumen del sitio web.
Nota: Sólo debe usar el archivo robots.txt si su sitio web contiene contenido que no desea que los motores de búsqueda incluyan. Si desea que los motores de búsqueda incluyan todo el contenido de su sitio web, no cree el archivo robots.txt. Al mismo tiempo, con el fin de facilitar la detección rápida y la generación de archivos de robots, la plataforma de webmaster de Baidu ha lanzado herramientas de robots en línea