moteur de recherche Yahoo!
description : (Hotbot-Lycos-NBCi) robot
bande passante : Les robots de Yahoo! ont la réputation d’être relativement friands de bande passante.
notes : L’url d’une page rejetée pourrait être incluse dans Yahoo! Lisez la documentation française relative aux méthodes recommandées pour optimiser l’indexation de son site internet sur yahoo
adresse et informations : http://www.inktomi.com/slurp.html
code robots.txt :
User-agent: Slurp
Disallow: /
User-agent: Slurp
Disallow:
User agent – robots.txt – liens utiles et outils
Tags : Yahoo



