Gary Illyes de Google aclaró en el podcast Search Off The Record que técnicamente Google no sigue enlaces. En cambio, Google extraerá los enlaces, los recopilará en una base de datos y luego los verificará más tarde. Por supuesto, la mayoría de ustedes ya lo saben y realmente no importa mucho que SEO sepa la diferencia, pero bueno.
Gary Illyes de Google dijo en el minuto 25:26 de ese podcast:
Bueno, sí, es mi motivo favorito. En mono [Google Search Central Site]seguimos diciendo que el robot de Google sigue enlaces, como, no, no sigue enlaces. Está recopilando enlaces y luego regresa a esos enlaces. No es como seguir enlaces correctamente. La imagen que estamos pintando es que el robot de Google es como saltar de…
Luego, Gary publicó una pequeña publicación sobre esto en LinkedIn, explicando más. «Probablemente hayas escuchado antes que el robot de Google «sigue» enlaces. No es así. Pero es una forma bastante ilustrativa de describir lo que hace el robot de Google», dijo.
Él escribió:
Un episodio reciente de Search Off the Record (causó cierto revuelo porque aparentemente «filtramos» que el robot de Google no simplemente «sigue» los enlaces que encuentra en una página que acaba de descargar. Si alguna vez pasó algún tiempo analizando los registros de acceso de su servidor en el pasado , digamos, 15 años, ya sabías que ese no es el caso. Hay más cosas involucradas que simplemente hacer una solicitud ciega a las URL que se encuentran en un elemento; hay deduplicación entre variantes de protocolo, hay priorización de URL, hay café o falta de eso.
Entonces, ¿por qué «seguir»? Por mucho que no me guste, es una forma muy sencilla de explicar lo que realmente hace el robot de Google. Es valioso utilizar analogías simples (¿símiles?), pero también hay lugar para buscar explicaciones más profundas. Tú eliges el que crees que funcionará para la audiencia con la que estás hablando en ese momento.
Aquí está el embed para escucharlo:
Gary también agregó en un comentario en lo profundo de LinkedIn aquí en un idioma diferente: «Por cierto, tenemos otro sistema de extracción de enlaces en el proceso de indexación (para enlaces elegantes/estúpidos)».
También está esta pregunta de Kristine Schachinger, quien preguntó: «Estoy confundida. Sé que Google puede activar sitios dinámicos para «crear páginas» a partir de enlaces internos, lo que supuse que solo ocurre durante el rastreo, entonces, ¿cómo sucede eso en este escenario? » Gary respondió diciendo: «No creo que haya una relación entre las dos cosas. Los rastreadores ven un enlace y eventualmente regresan a ese enlace (y si no lo hacen, al menos en el caso del robot de Google, terminas con «Descubrido, «no rastreado», o lo que sea que informe Search Console). Si regresan, la nueva página se crea dinámicamente. Lo que solíamos hacer con wget para descargar cosas de forma recursiva en tiempo real no existe con los rastreadores modernos».
Por lo tanto, Google extrae enlaces de muchas maneras y no sigue inmediatamente los enlaces que extrae.
Foro de discusión en LinkedIn.
