[ad_1]
Google ha publicado la lista completa de direcciones IP que utiliza para rastrear y acceder a su sitio web bajo los agentes de usuario de Googlebot. Google dijo Si no desea utilizar DNS inverso otros tipos de métodos para verificar el robot de Google, “puede identificar al robot de Google por dirección IP haciendo coincidir la dirección IP del rastreador con el lista de direcciones IP de Googlebot. “
¿Por qué necesito esto? Si cree que alguien está rastreando su sitio, haciéndose pasar por un robot de Google, y desea verificar que el bloqueo de este rastreador falso de Googlebot no es realmente Google, puede utilizar el método de línea de comando o método de lista de IP automatizado.
Lista de IP. Puede acceder a la lista completa de direcciones IP de Googlebot aquí en este archivo JSON, tenga en cuenta que Google puede actualizar esta lista, por lo que probablemente debería comprobar el archivo a diario. También puede acceder a todos los demás rastreadores de Google que coinciden con la dirección IP del rastreador con la lista completa de direcciones IP de Google. Nuevamente, estas direcciones IP pueden cambiar con el tiempo, por lo que debe incorporar en sus mecanismos una forma de actualizar las direcciones IP por su parte.
Por qué nos importa. A menudo, los sitios pueden ralentizarse y posiblemente incluso desconectarse debido a que bots falsos rastrean y arañan el sitio. Rara vez desea bloquear a Google para que no rastree su sitio porque eso puede generar problemas de indexación y clasificación en la Búsqueda de Google. Entonces, saber qué bot es realmente de Google y cuál no, puede ayudarlo a decidir qué bots deshonestos bloquear de su sitio.
También hay servicios de terceros, como Cloudflare y otros, que le ayudan a gestionar esto.
Sobre el Autor
Barry Schwartz, editor colaborador de Search Engine Land y miembro del equipo de programación de eventos SMX. De él OxidadoLadrillo, una empresa de consultoría web con sede en Nueva York. El tambien corre Mesa redonda de motores de búsqueda, un blog de búsqueda popular sobre temas SEM muy avanzados. El blog personal de Barry se llama Barry de dibujos animados y se le puede seguir en Twitter aquí.
[ad_2]
Source link
