Aparece el sitio web de inicio de sesión. Debido a que hay instrucciones de restricción (que restringen el rastreo de motores de búsqueda) en el archivo robots.txt del sitio web, el sistema no puede proporcionar esta página. ¿Qué debo hacer?

Baidu no puede rastrear el sitio web porque el archivo robots.txt del sitio web bloquea a Baidu.

Método:

1. Modificar el archivo robots y desbloquear la página. Para obtener detalles sobre la forma estándar de escribir robots, consulte la Enciclopedia Baidu: enlace web.

2. Actualice el robot del sitio web en Baidu Webmaster Platform (rebautizada como Baidu Resource Platform). Después de un período de tiempo, su sitio web será rastreado e incluido normalmente.

Impacto:

Los sitios web configuran protocolos de bot para evitar que los motores de búsqueda rastreen información confidencial por razones de seguridad y privacidad. El principio de un motor de búsqueda es recopilar automáticamente páginas web en Internet y obtener información relevante a través de un programa rastreador.

Por consideraciones de privacidad y seguridad de la red, cada sitio web configurará su propio protocolo Robots para mostrar claramente a los motores de búsqueda qué contenido está dispuesto y permitido para ser incluido por los motores de búsqueda y cuál no está permitido. Los motores de búsqueda rastrearán según los permisos otorgados por el protocolo Robots.

Robot Agreement representa un espíritu contractual. Sólo cumpliendo esta norma las empresas de Internet pueden garantizar que no se infrinjan los datos de privacidad de los sitios web y de los usuarios. La violación del protocolo del robot puede conllevar importantes riesgos de seguridad.

Hubo un caso real antes: Guo, un empleado de una empresa de limpieza, envió un correo electrónico de solicitud de empleo a otras personas y el correo electrónico se almacenó en el servidor de una empresa de servicios de correo electrónico. Como el sitio web no tenía un protocolo de robots, los correos electrónicos fueron rastreados por motores de búsqueda y buscados por los internautas, lo que trajo grandes problemas al trabajo y la vida de Guo.

Hoy en día, en la industria nacional de Internet de China, las empresas formales a gran escala también utilizan el protocolo Robots como estándar industrial. Los casos más típicos del uso del protocolo Robots por parte de China son el rechazo de Taobao a la búsqueda de Baidu y el rechazo de JD.COM a la búsqueda de Ceramics. La gran mayoría de los sitios web pequeños y medianos dependen de los motores de búsqueda para aumentar el tráfico, por lo que normalmente no excluyen los motores de búsqueda y rara vez utilizan el protocolo Robots.

Zhao Hu, abogado director de Beijing Hanzun Law Firm, dijo que el protocolo del robot es una regla importante para mantener la privacidad y la seguridad en el mundo de Internet. Si se infringe esta regla, será un desastre para toda la industria.

¿Consulta el contenido anterior? Enciclopedia Baidu-Protocolo de robot