刘运辉 潘向黎:蜘蛛协议的先后顺序

来源:百度文库 编辑:高考问答 时间:2024/04/28 19:08:31
User-agent: Baiduspider
Disallow:

User-agent: Googlebot
Disallow:

User-agent: SWSeekBot
Disallow:

User-agent: *
Disallow: /

这是个完整的协议,请问它究竟有没有禁止任何引擎收录它呢?谢谢