Este artículo te mostrará dos métodos para evitar que tu Locator & Pages se indexen en los motores de búsqueda.

¿Por qué evitar la indexación?

Puede ser beneficioso no tener tu Locator & Pages indexado en los motores de búsqueda si hay contenido duplicado en varias instancias del Locator. Esta solución es para casos de uso donde hay varias páginas con el mismo Locator y las mismas Locations. Esas páginas serán identificadas como duplicadas por los motores de búsqueda y causarán problemas de indexación. Es totalmente posible que los enlaces indexados se dividan entre todas las instancias existentes del mismo Locator. Para resolver esta situación, los motores de búsqueda solo deben evaluar las URLs de un Locator e ignorar el resto. Esto te dará las mejores posibilidades de tener tus Locations correctamente indexadas.

Bloqueo mediante robots.txt

Este método utiliza el archivo robots.txt. Es posible añadir reglas para desautorizar el rastreo por motores de búsqueda. Puedes añadir reglas similares a tu archivo robots.txt para evitar el rastreo de la página principal del Locator así como cualquier página en la carpeta del Locator.

user-agent: otherbot
disallow: /locator_folder
disallow: /locator_folder/*

Bloqueo mediante noindex

Este método utilizará una etiqueta meta ubicada en el <head> de tu página Locator para evitar que los rastreadores identifiquen tu página. Añade lo siguiente a la página donde se encuentra el Locator:

<meta name="robots" content="noindex">

Si tu Locator se puede acceder en https://mydomain.com/locator, añade la etiqueta en esa página. Dado que la etiqueta noindex se ha añadido a la página principal del Locator, también se aplicará a todas las subpáginas.