Categorías: Marketing Digital

¿Qué es el presupuesto de rastreo y deberían preocuparse los SEO?

[ad_1]

El presupuesto de rastreo indica qué tan rápido y cuántas páginas desea rastrear un motor de búsqueda en su sitio. Se ve afectado por la cantidad de recursos que un rastreador desea usar en su sitio y la cantidad de rastreo que admite su servidor.

Más rastreo no significa que tendrá una mejor clasificación, pero si sus páginas no se rastrean e indexan, no se clasificarán en absoluto.

La mayoría de los sitios no necesitan preocuparse por el presupuesto de rastreo, pero hay algunos casos en los que es posible que desee echar un vistazo. Veamos algunos de esos casos.

¿Cuándo debería preocuparse por el presupuesto de rastreo?

Por lo general, no tiene que preocuparse por el presupuesto de rastreo en páginas populares. Por lo general, las páginas que son más nuevas, que no están bien vinculadas o que no cambian mucho, no se rastrean con frecuencia.

El presupuesto de rastreo puede ser una preocupación para los sitios más nuevos, especialmente aquellos con muchas páginas. Es posible que su servidor admita más rastreos, pero debido a que su sitio es nuevo y probablemente aún no sea muy popular, un buscador es posible que no desee rastrear mucho su sitio. Esto es principalmente una desconexión en las expectativas. Quiere que sus páginas sean rastreadas e indexadas, pero Google no sabe si vale la pena indexarlas y es posible que no quiera rastrear tantas páginas como desee.

El presupuesto de rastreo también puede ser una preocupación para los sitios más grandes con millones de páginas o sitios que se actualizan con frecuencia. En general, si tiene muchas páginas que no se rastrean o actualizan con la frecuencia que desea, es posible que desee considerar la posibilidad de acelerar el rastreo. Hablaremos sobre cómo hacerlo más adelante en el artículo.

Cómo comprobar la actividad de rastreo

Si desea ver una descripción general de la actividad de rastreo de Google y cualquier problema que identificaron, el mejor lugar para buscar es el Informe de estadísticas de rastreo en Google Search Console.

Aquí hay varios informes para ayudarlo a identificar cambios en el comportamiento de rastreo, problemas con el rastreo y brindarle más información sobre cómo Google rastrea su sitio.

Definitivamente quieres investigar cualquier estados de rastreo marcados como los que se muestran aquí:

También hay marcas de tiempo de cuándo se rastrearon las páginas por última vez.

Si desea ver los resultados de todos los bots y usuarios, necesitará acceder a sus archivos de registro. Dependiendo del alojamiento y la configuración, es posible que tenga acceso a herramientas como Awstats y Webalizer, como se ve aquí en un host compartido con cPanel. Estas herramientas muestran algunos datos agregados de sus archivos de registro.

Para configuraciones más complejas, tendrá que obtener acceso y almacenar datos de los archivos de registro sin procesar, posiblemente de múltiples fuentes. También puede necesitar herramientas especializadas para proyectos más grandes, como un ALCE (elasticsearch, logstash, kibana) pila que permite el almacenamiento, procesamiento y visualización de archivos de registro. También hay herramientas de análisis de registros como Splunk.

¿Qué cuenta en contra del presupuesto de rastreo?

Todas las URL y solicitudes se contabilizan en su presupuesto de rastreo. Esto incluye URL alternativas como AMPERIO o páginas de puntos m, hreflang, CSSy JavaScript, incluido XHR peticiones.

Estas URL se pueden encontrar rastreando y analizando páginas, o desde una variedad de otras fuentes, incluidos mapas del sitio, RSS feeds, enviando URL para indexar en Google Search Console o utilizando el indexación API.

Tambien hay múltiples Googlebots que comparten el presupuesto de rastreo. Puede encontrar una lista de los diversos Googlebots que rastrean su sitio web en el informe Estadísticas de rastreo en GSC.

Google ajusta cómo se rastrean

Cada sitio web tendrá un presupuesto de rastreo diferente que se compone de algunas entradas diferentes.

Demanda de rastreo

La demanda de rastreo es simplemente cuánto quiere rastrear Google en su sitio web. Las páginas más populares y las que experimentan cambios significativos se rastrearán más.

Las páginas populares, o aquellas con más enlaces a ellas, generalmente recibirán prioridad sobre otras páginas. Recuerde que Google tiene que priorizar sus páginas para el rastreo de alguna manera, y los enlaces son una forma fácil de determinar qué páginas de su sitio son más populares. Sin embargo, no es solo su sitio, son todas las páginas en todos los sitios en Internet que Google tiene que descubrir cómo priorizar.

Puedes usar el Mejor por enlaces informe en Explorador del sitio como una indicación de qué páginas es probable que se rastreen con más frecuencia. También te muestra cuándo Ahrefs rastreó tus páginas por última vez.

También hay un concepto de obsolescencia. Si Google ve que una página no está cambiando, rastreará la página con menos frecuencia. Por ejemplo, si rastrean una página y no ven cambios después de un día, es posible que esperen tres días antes de volver a rastrear, diez días la próxima vez, 30 días, 100 días, etc. No hay un período establecido real que esperarán entre rastreos. pero será menos frecuente con el tiempo. Sin embargo, si Google ve grandes cambios en el sitio en su conjunto o en un movimiento del sitio, normalmente aumentarán la frecuencia de rastreo, al menos temporalmente.

Límite de frecuencia de rastreo

El límite de frecuencia de rastreo es la cantidad de rastreo que puede soportar su sitio web. Los sitios web tienen una cierta cantidad de rastreo que pueden realizar antes de tener problemas con la estabilidad del servidor, como ralentizaciones o errores. La mayoría de los rastreadores dejarán de rastrear si comienzan a ver estos problemas para que no dañen el sitio.

Google se ajustará en función del estado de rastreo del sitio. Si el sitio funciona con más rastreo, el límite aumentará. Si el sitio tiene problemas, Google reducirá la velocidad a la que se rastrean.

Quiero que Google se rastree más rápido.

Hay algunas cosas que puede hacer para asegurarse de que su sitio admita un rastreo adicional y aumente la demanda de rastreo de su sitio. Veamos algunas de esas opciones.

Acelere su servidor / aumente los recursos

La forma en que Google rastrea las páginas es básicamente para descargar recursos y luego procesarlos al final. Tu velocidad de la página como lo percibe un usuario, no es exactamente lo mismo. Lo que afectará el presupuesto de rastreo es la rapidez con la que Google puede conectarse y descargar recursos, lo que tiene más que ver con el servidor y los recursos.

Más enlaces externos Y interno

Recuerde que la demanda de rastreo generalmente se basa en la popularidad o los enlaces. Puede aumentar su presupuesto aumentando la cantidad de enlaces externos y / o vínculos internos. Los enlaces internos son más fáciles ya que usted controla el sitio. Puede encontrar enlaces internos sugeridos en el Oportunidades de enlace informe en Sitio de auditoría, que también incluye un tutorial que explica cómo funciona.

Reparar enlaces rotos y redirigidos

Mantener activos los enlaces a páginas rotas o redirigidas en su sitio tendrá un pequeño impacto en el presupuesto de rastreo. Por lo general, las páginas vinculadas aquí tendrán una prioridad bastante baja porque probablemente no hayan cambiado en un tiempo, pero limpiar cualquier problema es bueno para el mantenimiento del sitio web en general y ayudará un poco a su presupuesto de rastreo.

Puede encontrar enlaces rotos (4xx) y redirigidos (3xx) en su sitio fácilmente en la Páginas internas informe en Auditoría del sitio.

Para los enlaces rotos o redirigidos en el mapa del sitio, marque la Todos los problemas informe para “3XX redireccionar en el mapa del sitio “y”4XX página en el mapa del sitio ”.

Usar OBTENER en vez de CORREO Donde puedes

Éste es un poco más técnico en el sentido de que implica HTTP Métodos de solicitud. No use CORREO solicitudes donde OBTENER solicita trabajo. Es básicamente OBTENER (tirar) vs CORREO (empujar). CORREO las solicitudes no se almacenan en caché, por lo que afectan el presupuesto de rastreo, pero OBTENER las solicitudes se pueden almacenar en caché.

Utilice la indexación API

Si necesita que las páginas se rastreen más rápido, verifique si es elegible para Google Indexación API. Actualmente, esto solo está disponible para algunos casos de uso, como publicaciones de trabajo o videos en vivo.

Bing también tiene un Indexación API que está disponible para todos.

Lo que no funcionará

Hay algunas cosas que la gente intenta a veces y que en realidad no le ayudarán con su presupuesto de rastreo.

  • Pequeños cambios en el sitio. Realizar pequeños cambios en las páginas, como actualizar fechas, espacios o puntuación, con la esperanza de que las páginas se rastreen con más frecuencia. Google es bastante bueno para determinar si los cambios son significativos o no, por lo que no es probable que estos pequeños cambios tengan ningún impacto en el rastreo.
  • Directiva de demora de rastreo en robots.txt. Esta directiva ralentizará muchos bots. Sin embargo, Googlebot no lo usa, por lo que no tendrá ningún impacto. Respetamos esto en Ahrefs, por lo que si alguna vez necesita ralentizar nuestro rastreo, puede agregar un retraso de rastreo en su robots.txt expediente.
  • Eliminación de scripts de terceros. Los scripts de terceros no cuentan para su presupuesto de rastreo, por lo que eliminarlos no ayudará.
  • No seguir. Bien, este es dudoso. En el pasado enlaces nofollow no habría utilizado el presupuesto de rastreo. Sin embargo, nofollow ahora se trata como una pista, por lo que Google puede optar por rastrear estos enlaces.

Quiero que Google rastree más lento

Hay solo un par de buenas formas de hacer que Google rastree más lento. Hay algunos otros ajustes que técnicamente podría hacer, como ralentizar su sitio web, pero no son métodos que recomendaría.

Ajuste lento, pero garantizado

El principal control que Google nos da para rastrear más lento es un Límite de tarifa dentro de Google Search Console. Puede reducir la velocidad de rastreo con la herramienta, pero puede tardar hasta dos días en surtir efecto.

Ajuste rápido, pero con riesgos

Si necesita una solución más inmediata, puede aprovechar los ajustes de la frecuencia de rastreo de Google relacionados con el estado de su sitio. Si le entrega al robot de Google un código de estado ‘503 Servicio no disponible’ o ‘429 Demasiadas solicitudes’ en las páginas, comenzarán a rastrear más lento o pueden dejar de rastrear temporalmente. Sin embargo, no desea hacer esto por más de unos pocos días o pueden comenzar a eliminar páginas del índice.

Pensamientos finales

Una vez más, quiero reiterar que el presupuesto de rastreo no es algo de lo que deba preocuparse la mayoría de la gente. Si tiene alguna inquietud, espero que esta guía le haya resultado útil.

Por lo general, solo lo miro cuando hay problemas con las páginas que no se rastrean e indexan, necesito explicar por qué alguien no debería preocuparse por eso o veo algo que me preocupa en el informe de estadísticas de rastreo en Google Search Console. .

¿Tiene preguntas? Avísame en Gorjeo.

[ad_2]

Source link

¡Haz clic para puntuar esta entrada!
(Votos: 0 Promedio: 0)
webmaster

Entradas recientes

25 hechos que no sabías sobre Baidu

[ad_1] Google siempre domina los titulares de SEO. Los creadores de contenido, los administradores de… Leer más

3 semanas hace

Programa de valor masivo del cerebro del redactor

Product Name: Programa de valor masivo del cerebro del redactor [ad_1] Click here to get… Leer más

3 semanas hace

9 formas de mejorar su carrera de marketing de búsqueda

[ad_1] 9 formas de mejorar su carrera de marketing de búsqueda Tu privacidad significa el… Leer más

3 semanas hace

Gestión de un programa de embajadores de marca

[ad_1] En Internet, las personas pueden preguntar fácilmente a los demás qué están pensando. Esto… Leer más

3 semanas hace

Google está probando el protocolo IndexNow para la sostenibilidad

[ad_1] Un portavoz de Google ha confirmado que la empresa de búsqueda probará el nuevo… Leer más

3 semanas hace

Manifestación de los sueños: ¡ofrece hasta un 75% de comisión!

Product Name: Manifestación de los sueños: ¡ofrece hasta un 75% de comisión! [ad_1] Click here… Leer más

3 semanas hace