百度首页 | 百度知道 | 登录
关闭
百度知道
新闻   网页    贴吧   知道   MP3   图片   视频   百科    文库

帮助 | 设置

已解决
robots.txt怎么写,我只想让百度、谷歌、雅虎蜘蛛爬我的站
悬赏分:20 - 解决时间:2010-3-1 21:05
只想让百度、谷歌、雅虎收录我的站,不让其他的蜘蛛来爬站。
robots.txt怎么写?
求完整正确的写法 
提问者: ty711419 - 五级
最佳答案
User-agent: Baiduspider
  Disallow: 
User-agent: googlespider
  Disallow: 

User-agent: yahoospider
  Disallow: 
 
User-agent: *
  Disallow: / 
 2

回答者: chenxd2012 - 一级  2010-2-28 19:07

提问者对于答案的评价:
谢谢了
©2010 Baidu  百度知道开放平台

百度知道是全球最大的问答型知识分享平台

我们真诚欢迎您加入,分享属于您的精彩~!