La indexación de sitios web es uno de los primeros pasos (después del rastreo) en un proceso complejo de comprender de qué se tratan las páginas web para que los motores de búsqueda las clasifiquen y las sirvan como resultados de búsqueda.

Los motores de búsqueda mejoran constantemente la forma en que rastrean e indexan los sitios web.

Comprender cómo Google y Bing abordan el rastreo y la indexación de sitios web es esencial para el SEO técnico y útil para desarrollar estrategias para mejorar la visibilidad de búsqueda.

Indexación: cómo funcionan los motores de búsqueda en la actualidad

Veamos los aspectos prácticos de cómo funcionan los motores de búsqueda.

Este artículo se centra en la indexación. Entonces, vamos a sumergirnos.

Indexación web

La indexación es donde comienza el proceso de clasificación después de que se ha rastreado un sitio web.

La indexación se refiere esencialmente a agregar el contenido de una página web a Google para que se considere para las clasificaciones.

Cuando crea una nueva página en su sitio, hay varias formas de indexarla.

El método más simple para indexar una página es no hacer absolutamente nada.

Google tiene rastreadores que siguen los enlaces y, por lo tanto, siempre que su sitio ya esté en el índice y el nuevo contenido esté vinculado desde su sitio, Google eventualmente lo descubrirá y lo agregará a su índice. Más sobre esto más adelante.

Cómo indexar una página más rápido

Pero, ¿qué pasa si quieres que Googlebot llegue a tu página más rápido?

Esto puede ser importante si tiene contenido oportuno o si ha realizado un cambio importante en una página que necesita que Google conozca.

Utilizo métodos más rápidos cuando optimicé una página crítica o ajusté el título y la descripción para mejorar los clics.

Quiero saber específicamente cuándo se recogieron y se mostraron en los SERP para saber dónde comienza la medición de la mejora.

En estos casos, existen algunos métodos adicionales que puede utilizar.

1. Mapas de sitio XML

Los mapas de sitio XML son la forma más antigua y generalmente confiable de llamar la atención de un motor de búsqueda sobre el contenido.

Un mapa del sitio XML brinda a los motores de búsqueda una lista de todas las páginas de su sitio, así como detalles adicionales al respecto, como cuándo se modificó por última vez.

Se puede enviar un mapa del sitio a Bing a través de Bing Webmaster Tools, y también se puede enviar a Google a través de Search Console.

¡Definitivamente recomendado!

Pero cuando necesita una página indexada de inmediato, no es particularmente confiable.

2. Solicitar indexación con Google Search Console

En Search Console, puede “Solicitar indexación”.

Comienza haciendo clic en el campo de búsqueda superior, que dice de forma predeterminada, “Inspeccionar y URL en dominio.com”.

Ingrese la URL que desea indexar, luego presione Enter.

Si Google ya conoce la página, se le presentará un montón de información. No entraremos en eso aquí, pero recomiendo iniciar sesión y ver qué hay allí si aún no lo ha hecho.

Para nuestros propósitos aquí, el botón importante aparece ya sea que la página haya sido indexada o no, lo que significa que es bueno para el descubrimiento de contenido o simplemente para solicitar a Google que comprenda un cambio reciente.

Encontrará el botón que se muestra a continuación.

En unos pocos segundos a unos minutos, puede buscar el nuevo contenido o URL en Google y encontrar el cambio o el nuevo contenido seleccionado.

3. Participe en IndexNow de Bing

Bing tiene un protocolo abierto basado en un método push para alertar a los motores de búsqueda sobre contenido nuevo o actualizado.

Este nuevo protocolo de indexación de motores de búsqueda se llama IndexNow.

Se llama protocolo push porque la idea es alertar a los motores de búsqueda que usan IndexNow sobre contenido nuevo o actualizado, lo que hará que vengan a indexarlo.

Un ejemplo de un protocolo de extracción es la antigua forma de mapa de sitio XML que depende de un rastreador de motor de búsqueda para decidir visitarlo e indexarlo (o que Search Console lo obtenga).

El beneficio de IndexNow es que desperdicia menos recursos de alojamiento web y centro de datos, lo que no solo es más ecológico, sino que también ahorra recursos de ancho de banda.

Sin embargo, el mayor beneficio es una indexación de contenido más rápida.

Actualmente, IndexNow solo lo utilizan Bing y Yandex.

Implementar IndexNow es fácil:

4. Herramientas para webmasters de Bing

Además de participar en IndexNow, considere una cuenta de Herramientas para webmasters de Bing.

Si no tiene una cuenta de Herramientas para webmasters de Bing, no puedo recomendarlo lo suficiente.

La información proporcionada es sustancial y lo ayudará a evaluar mejor las áreas problemáticas y mejorar su clasificación en Bing, Google y en cualquier otro lugar, y probablemente brindará una mejor experiencia de usuario.

Pero para indexar su contenido, simplemente necesita hacer clic en: Configure Mi sitio > Enviar URL.

Ingrese las URL que desea indexar y haga clic en “Enviar”.

Captura de pantalla de Bing Webmaster Tools, enero de 2023

Entonces, eso es la mayor parte de lo que necesita saber sobre la indexación y cómo lo hacen los motores de búsqueda (con un ojo hacia dónde van las cosas).

Más detalles en la página de ayuda de la Herramienta de envío de URL de las Herramientas para webmasters de Bing.

También hay una API de indexación de Herramientas para webmasters de Bing que también puede acelerar el tiempo en que el contenido aparece en los resultados de búsqueda de Bing en cuestión de horas.

Más información sobre la API de indexación de Bing está aquí.

Presupuesto de rastreo

No podemos hablar de indexación sin hablar del presupuesto de rastreo.

Básicamente, el presupuesto de rastreo es un término que se usa para describir la cantidad de recursos que Google gastará en rastrear un sitio web.

El presupuesto asignado se basa en una combinación de factores, siendo los dos centrales:

• ¿Qué tan rápido es su servidor (es decir, cuánto puede rastrear Google sin degradar su experiencia de usuario)?
• ¿Qué tan importante es su sitio?

Si ejecuta un sitio de noticias importante con contenido en constante actualización que los usuarios de motores de búsqueda querrán conocer, su sitio será rastreado con frecuencia (me atrevo a decir, constantemente).

Si tiene una barbería pequeña, tiene un par de docenas de enlaces y, por derecho, no se considera importante en este contexto (puede ser un barbero importante en el área, pero no es importante cuando se trata del presupuesto de rastreo), entonces el presupuesto será bajo.

Puede obtener más información sobre los presupuestos de rastreo y cómo se determinan en la explicación de Google.

Google tiene dos tipos de rastreo

La indexación de Google comienza con el rastreo, que tiene dos tipos:

• El primer tipo de rastreo es Discovery, donde Google descubre nuevas páginas web para agregar al índice.
• El segundo tipo de rastreo es Actualizar, donde Google encuentra cambios en páginas web que ya están indexadas.

Descubre cómo funcionan los motores de búsqueda

La optimización de sitios web para los motores de búsqueda comienza con un buen contenido y termina con el envío para indexarlo.

Ya sea que lo haga con un mapa del sitio XML, la herramienta de envío de URL de Google Search Console, las herramientas para webmasters de Bing o IndexNow, obtener ese contenido indexado es cuando su página web comienza su viaje hacia la parte superior de los resultados de búsqueda (¡si todo funciona!).

Por eso es importante comprender cómo funciona la indexación de búsqueda.

Obtenga más información sobre los factores clave que influyen en las páginas de resultados de los motores de búsqueda en Cómo funcionan los motores de búsqueda.

Imagen destacada: Overearth/Shutterstock