Posted by: Emiliano
Comments: 0
Post Date: 3 de enero de 2014
Si Google tiene problemas para acceder al archivo robots.txt puede no indexar tu sitio
¿Sabían que si Google tiene algún problema para acceder al archivo robots.txt de un sitio, puede decidir no indexar nada de ese sitio? Esto es lo que dice Erick Kuan en el foro de Google.
Si Google tiene problemas para acceder al archivo robots.txt, detendrá la indexación del resto del sitio para prevenir el acceso a páginas que probablemente hayan sido blockeadas en dicho archivo.
Una cosa es no tener un archivo robots.txt, lo cual es totalmente válido. Si no lo tienes, no hay de que preocuparse. Pero si lo tienes y por algún motivo Google no puede entrar al mismo, estás en problemas.
Deja una respuesta