Google acaba de presentar en sociedad un nuevo agente de usuario: Googlebot-News, el bot encargado de recorrer e indexar contenido que tenga que ver con Noticias.
De esta manera, las directivas en el archivo robots.txt, podrán parecer de la siguiente manera, por ejemplo:
User-agent: Googlebot
Disallow:
User-agent: Googlebot-News
Disallow: /
De esta manera, robots.txt permite al bot de Google recorrer el sitio, no así al bot encargado de indexar las noticias.
Si te interesa, además, conocer UserAgents.org podés consultar ahí, la lista completa y actualizada de agentes de usuario.
Vía | El Blog para Webmasters
-
El nuevo acortador de URLs de Google
14 Diciembre 2009 8:09 PM | 1 ComentarioEl servicio de URL Shortener de Google no sería tal per sé sino que estaría asociado a la nueva versión de la Google Toolbar. De esta manera, a diferencia de otros servicios; Google se distinguiría por: Estabilidad Seguridad Velocidad Sitio Web | http://goo.gl/ Vía |...
Leer Más -
Wave Robots
22 Noviembre 2009 7:32 PM | No hay ComentariosUn directorios de robots para usar en Wave Wave Robots es simplemente un directorio de robots que se pueden utilizar en Google Wave. Sitio Web | Wave Robots Por cierto, tengo disponibles 8 (ocho) invitaciones para Google Wave. Quienes deseen participar, sólo utilicen el formulario...
Leer Más -
Como probar Google Docs sin tener una cuenta en Google
05 Junio 2010 3:49 AM | 2 ComentariosEs posible—ahora—probar y tener una experiencia de primera mano con la suite online Google Docs; esto es, sin tener siquiera una cuenta de Google. O de otra manera, llevar a cabo una publicación o intentar hacer una trabajo colaborativo sin revelar información sensible; es otra...
Leer Más
Mi nombre es Daniel Ulczyk y soy un Webmaster independiente que desarrolla sus actividades en Buenos Aires — Argentina.
Soy Consultor SEO y Analista de Accesibilidad Web.
Sentíte libre de dejar cualquier comentario o 
