robot - user agent : msnbot-media
Jeudi, décembre 13th, 2007moteur de recherche MSN Live Search
description : MSN media search robot - 65.55.235.1xx
bande passante : MSNbot est un grand consommateur de bande passante et pousse parfois certains webmasters à coder leur fichier robots.txt et d’ainsi préciser à l’intention des robots d’MSN, le Crawl-delay : le délai en secondes entre l’archivage de chaque page.
adresse et informations : http://help.live.com/help.aspx?mkt=fr-FR&project=wl_webmasters
code robots.txt :
User-agent: msnbot
Disallow: /
User-agent: msnbot
Disallow:
Ajoutez votre commentaire
Notre sélection d'articles sur une thématique proche.
Robot
User agent - robots.txt - liens utiles et outils
bots - agent user - moteurs de recherche : fiches [...]
robot - user agent : Googlebot/2.1moteur de recherche Google description : Google robot 66.249.64.XXX bande passante : Pour prendre [...]
robot - user agent : Slurp/2.0moteur de recherche Yahoo! description : (Hotbot-Lycos-NBCi) robot bande passante : Les robots de [...]
robot - user agent : msnbot-mediamoteur de recherche MSN Live Search description : MSN media search robot - 65.55.235.1xx bande passante [...]
robot - user agent : VoilaBotmoteur de recherche VoilaBot BETA 1.2 Mozilla/4.0 (compatible; MSIE 5.0; Windows 95) bande passante [...]
