El sistema Sitemaps ya es un estándar, y ahora se define un protocolo para indicarlo en el archivo robots.txt
Hasta ahora, para indicarle a cualquier buscador que nuestro sitio web dispone de un fichero Sitemap y que puede utilizarlo para rastrear mejor nuestras páginas, teníamos que indicárselo explícitamenente.
A partir de hoy es posible indicar cuál es nuestro fichero Sitemap mediante el archivo "robots.txt", simplemente agregando una línea de formato:
Esta línea puede estar en cualquier parte del fichero, es independiente del "user-agent" de los robots de los buscadores, y es importante indicar la ruta completa del Sitemap, sin olvidar escribir "http://".
Los cuatro principales buscadores (Google, Yahoo!, MSN Live Search y Ask.com) se unieron para ser capaces de leer este estándar de comunicación entre webmasters y buscadores.