我在自己的日志文件中整理出下列常用蜘蛛爬行标记，供使用本人开发的记录蜘蛛标记程序的朋友参考
注意，在后台添加上，请把标记字母全改成小写，否则程序无法辨认

百度：Baiduspider
参考：Baiduspider+(+http://www.baidu.com/search/spider.htm)

谷哥：Googlebot
参考：Googlebot/2.1; +http://www.google.com/bot.html

MSN: msnbot
参考"msnbot/2.0b (+http://search.msn.com/msnbot.htm)

有道：YoudaoBot
参考：YoudaoBot/1.0; http://www.youdao.com/help/webmaster/spider/;

SOSO：Sosospider
参考：Sosospider+(+http://help.soso.com/webspider.htm)

雅虎：Slurp
参考：Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html

搜狗：Sogou
参考：Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)

Alexa：Alexa
参考：Alexa Toolbar

错误之处请您指出
如果你知道其他蜘蛛标记请与我联系