Crawl Budget, o Presupuesto de Rastreo, es el presupuesto asignado por el robot de Google para rastrear nuestra página web, es decir, el número de páginas que el robot de Google rastrea e indexa en un sitio web dentro de un periodo de tiempo determinado.
¿Por qué es importante el Crawl Budget para SEO?
Si Google no indexa una página, no va a estar en ningún puesto, así que si nuestro número de páginas excede el presupuesto de rastreo de nuestro sitio (dato que sólo conoce Google y que asigna según su valoración sobre nuestra página), tendremos páginas en nuestro sitio que no estarán indexadas.
Dicho esto, la gran mayoría de los sitios no necesitan preocuparse por el presupuesto de rastreo porque Google es muy bueno en el rastreo e indexación de páginas, pero hay algunos casos en los que debemos prestar atención.
Claves SEO sobre Crawl Budget
Si tenemos un sitio web de comercio electrónico, como una tienda online, con miles de páginas, Google puede tener problemas para encontrarlas todas. Si, además, acabamos de añadir una nueva sección a nuestro sitio con cientos de páginas, querremos asegurarnos que contamos con el presupuesto de rastreo correcto para que sean indexadas todas, para lo cual habrá que tener en cuenta lo siguiente:
Los redireccionamientos consumen presupuesto de rastreo, hay que procurar reducirlos lo máximo posible.
Una baja velocidad del sitio. La mejora de la velocidad de carga de las páginas de nuestra web es capital y puede llevar a Google a rastrear más páginas de su sitio en menos tiempo. (Consulta en este artículo del Blog, las mejores Herramientas para un análisis SEO Gratis)
Usar Enlaces Internos. Google da prioridad a las páginas que tienen muchos enlaces externos e internos que apuntan a ellas. Lo ideal es tener un gran número de backlinks apuntando a cada una de nuestras páginas, pero eso no es realista en la mayoría de los casos, es por eso que contruir (linkbuilding) una buena red de enlaces internos es tan importante, porque enviarán a Google a todas las páginas de nuestro sitio que deseamos indexar.
Tener una arquitectura plana en nuestro sitio estructura las cosas de manera que todas las páginas de nuestro sitio tengan alguna autoridad de enlace que fluya hacia ellas, con lo cual, hay que evitar las páginas huérfanas, que son páginas que no tienen enlaces internos o externos que las señalen.
Limitar el contenido duplicado es inteligente por muchas razones, entre otras, porque puede perjudicar nuestro presupuesto de rastreo. Esto se debe a que Google no quiere desperdiciar recursos indexando varias páginas con el mismo contenido así que debemos asegurarnos de que el 100% de las páginas de nuestro sitio estén compuestas de contenido único y de calidad.
Esto no es fácil para una web con miles de páginas, pero es imprescindible si deseamos sacar el máximo provecho de nuestro Crawl Budget o prespuesto de rastreo.
Para concluir, decir que estas claves SEO sobre Crawl Budget nos sirven para todo tipo de sitios web, ya sean Blogs, Ecommerce, Webs Corporativas, etc.
