Control de Crawleo e Indexación en Google
Gogle ha publicado (en inglés) un documento donde se detalla exhaustivamente cómo trabaja Googlebot en el rastreo e indexación de las páginas de un sitio web.
Es muy interesante el documento en el que se detallan formatos válidos del robots.txt de un sitio web, esencial para una correcta indexación en los motores de búsqueda.
Para ver el documento accedan desde el siguiente enlace.
Google+Comentarios
Sin comentarios todavia!.
Disculpe, los comentarios están cerrados en este momento.