Excluir páginas web de los motores de búsqueda utilizando robots meta etiquetas

Puede usar etiquetas Meta robots para evitar que una araña motor de búsqueda de rastreo páginas específicas en su sitio Web. Puede incluir una etiqueta especial en el código HTML de la página para decirle a los robots no indexar esa página, o no seguir los enlaces en esa página. Se podría colocar esta etiqueta después de la otra Meta etiquetas, que son parte del código HTML ubicado en la sección de la cabeza de una página Web.

Usando Meta robots etiquetas es menos eficiente que el uso de un archivo de texto robots en todo el sitio por dos razones. En primer lugar, los robots veces ignoran robots etiquetas Meta, y en segundo lugar, estas etiquetas ralentizan los robots leen sus páginas, lo que puede disminuir el número de páginas que están dispuestos a gatear. Además, este método puede dar dolores de cabeza para webmasters porque las etiquetas tienen que ser mantenidos en las páginas individuales, en lugar de en un archivo central.

La robots etiqueta Meta a continuación le indica al robot motor de búsqueda no indexar la página y no seguir cualquiera de los enlaces de la página:

Usted podría utilizar esta etiqueta para decirle al robot para leer e indexar el contenido de la página, pero no seguir cualquiera de los enlaces:

La siguiente etiqueta indica al robot a ignorar el contenido de la página, pero seguir los enlaces:


» » » » Excluir páginas web de los motores de búsqueda utilizando robots meta etiquetas