Google notifica a los webmasters para eliminar noindex de los archivos robots.txt

Tweet

Google ahora está enviando recordatorios de que debe dejar de depender de su noindex en su archivo robots.txt.


Como parte de la eliminación total del soporte de Google para la directiva noindex en los archivos robots.txt,
Google ahora está enviando notificaciones a aquellos que tienen tales directivas. Esta mañana, muchos dentro
de la comunidad de SEO comenzaron a recibir notificaciones de Google Search Console con la línea de asunto
"Eliminar declaraciones" noindex "del robots.txt de ..."

Cómo se ve Hay muchas capturas de pantalla de esto en las redes sociales, pero aquí hay una de Bill Hartzer 
en Twitter:

1 de septiembre de 2019. Esa es la fecha en que ya no necesita depender de la mención noindex en su archivo
robots.txt. Esto es algo que Google anunció a principios de este mes y ahora está enviando mensajes para 
ayudar a difundir este cambio.

Por qué debería importarnos Si recibe este aviso, asegúrese de asegurarse de que todo lo que mencionó en 
esta directiva noindex sea compatible de una manera diferente. Lo más importante es asegurarse de que no 
está utilizando la directiva noindex en el archivo robots.txt. Si es así, deseará realizar los cambios 
sugeridos antes del 1 de septiembre. Además, observe si está utilizando los comandos nofollow o crawl-delay
y, de ser así, utilice el método verdaderamente compatible para esas directivas en el futuro. .

Cuales son las alternativas? Google enumeró las siguientes opciones, las que probablemente debería haber
estado utilizando de todos modos:

(1) Noindex en metaetiquetas de robots: admitida tanto en los encabezados de respuesta HTTP como en HTML,
    la directiva noindex es la forma más efectiva de eliminar las URL del índice cuando se permite el rastreo.
(2) Códigos de estado HTTP 404 y 410: ambos códigos de estado significan que la página no existe, lo que
    eliminará dichas URL del índice de Google una vez que se hayan rastreado y procesado.
(3) Protección con contraseña: a menos que se use el marcado para indicar la suscripción o el contenido de
    pago, ocultar una página detrás de un inicio de sesión generalmente lo eliminará del índice de Google.
(4) No permitir en robots.txt: los motores de búsqueda solo pueden indexar páginas que conocen, por lo que
    bloquear el rastreo de la página a menudo significa que su contenido no se indexará. Si bien el motor de
    búsqueda también puede indexar una URL basada en enlaces de otras páginas, sin ver el contenido en sí, 
    nuestro objetivo es hacer que esas páginas sean menos visibles en el futuro.
(5) Herramienta Eliminar URL de Search Console: la herramienta es un método rápido y fácil para eliminar
    temporalmente una URL de los resultados de búsqueda de Google.

Fuente, traducido de: https://kinsta.us6.list-manage.com/track/click?u=ffe4168cc2b4337a805668e7f&id=edc7cc5995&e=fa7dc8483e