John Mueller de Google respondió una pregunta en Reddit sobre una metaetiqueta de robots de uso común y qué pasaría si faltara. La respuesta de Mueller, si bien tiene sentido y está documentada, aún puede sorprender a muchos editores y SEO.
Metaetiqueta Robots
El metaelemento HTML comunica metadatos. Los metadatos son información legible por máquina que un rastreador como Googlebot puede leer.
Hay muchos tipos de metaelementos, como el elemento de meta descripción, pero el metaelemento Robots se diferencia en que puede controlar los rastreadores de los motores de búsqueda.
La información comunicada por la metaetiqueta de robots se denomina directiva, lo que significa que los robots rastreadores están obligados a obedecer las instrucciones de la metaetiqueta de robots.
Hay muchas instrucciones para transmitir a través del meta de robots, pero la siguiente metaetiqueta es relevante para la pregunta que respondió John Mueller.
La metaetiqueta noindex, no follow:
<meta name="robots" content="noindex, nofollow">
La metaetiqueta anterior indica a los rastreadores de los motores de búsqueda que no indexen el contenido de la página web y que no sigan ningún enlace.
Una de las metaetiquetas más comunes es ésta, que ordena a los motores de búsqueda indexar el contenido y seguir todos los enlaces:
<meta name="robots" content="index, follow">
Si bien la metaetiqueta anterior es común, existe una gran cantidad de malentendidos al respecto. Existe un razonamiento que dice que debido a que Google admite nofollow, debe implicar que Google admite la directiva follow.
Encontré varios sitios web autorizados que dicen que Google utiliza el índice meta robots, sigue la metaetiqueta.
Pero en realidad no es así como Google utiliza esas directivas, como deja claro John Mueller en su respuesta.
¿Cuál es el efecto de omitir la etiqueta de índice Meta Robots?
La persona en Reddit hizo la siguiente pregunta:
“Estoy un poco confundido con el sitio web en el que estoy trabajando.
Entonces, así es como se ven los metafragmentos en la mayoría de los sitios web en los que trabajo:
