Uno de los primeros cambios visibles con la llegada de Obama a la Casa Blanca es el que se ha producido en la página oficial www.whitehouse.gov, no solo en su aspecto, sino también en su robots.txt:
User-agent: *
Disallow: /includes/
Mientras que ayer tenía más de 2400 líneas. Un buen paso hacia el cambio.
Vía kottke.
Actualización: Kevin Fox, ex-empleado de Google y ahora en FriendFeed, comenta sobre este tema (vía Blogoscoped):
Ésto es un poco tonto, ya que el viejo robots.txt excluía las páginas los resultados de las búsquedas internas y las versiones redundantes de texto de las páginas html.
Para ésto es exactamente un archivo robots.txt, que es lo que dice la Guía para Webmasters de Google “Use robots.txt to prevent crawling of search results pages or other auto-generated pages that don’t add much value for users coming from search engines.”
Es inexplicable que un robots.txt de 8 años de antigüedad desaparezca por otro de un día de antigüedad. Y no es que en el robots.txt vayan a aparecer carpetas como ‘/secrets/top’ o ‘/katrina/response/’.
January 24th, 2009 at 12:44 am
[...] algunos no es más que un gesto de poca relevancia, pero a veces la política se hace de pequeños [...]
January 27th, 2009 at 1:57 am
[...] algunos no es más que un gesto de poca relevancia, pero a veces la política se hace de pequeños [...]
February 11th, 2009 at 2:27 am
[...] cambio de Obama también en su Robot : [...]