Juan Manuel
Martes, 15 de Abril de 2008 a las 10.19
Slurp 3.0 es la nueva versión del spider-bot de Yahoo!, que indexa las páginas web para poder después mostrarlas en los resultados del buscador. Si bien seguirá con las mismas directivas de user-agent y fichero robots.txt, incluirá dos importantes novedades:
Por un lado residirán en un nuevo conjunto de IPs pero aún asà devolverán los datos al dominio crawl.yahoo.net. Además, devolverán un nuevo user-agent. Se recomienda utilizar las directivas Slurp o Yahoo! Slurp, pero no Slurp/2.0 (ahora desactualizada), en el código del sitio, y User-agent: Slurp en el robot.txt.
Comentarios recientes
- Mirta: A mi me pasa lo mismo que a Leandro y a Cris, que puede estar sucediendo...
- lk5: Deberian poner mas imagenes en sus posts, sin duda creo que seria mas at...
- Victor Figueroa: Bueno en mi epoca de estudio siguiente fueron los lenguajes aprendidos e...
- Joseph Rivera / Puerto Rico: Exelente portal de informacion ,, lo uso en cantidad ,, no dejen de prod...
- Morton: Maricela S., al parecer aún no está disponible la versión en español...
- Juan Jose: Que buen Blog de Michaell espero mas, grax por todo Michaell, descansa e...
Feed de los comentarios