2015-07-19 63 views
0
User-Agent:* 
Disallow:/ 

User-Agent: Googlebot 
User-Agent: Googlebot-Mobile 
User-Agent: Googlebot-Image 
User-Agent: Bingbot 
Allow:/ 

这是否允许所有4个机器人或只允许Bingbot并禁止所有内容?如何在robot.txt中允许多个机器人

编辑 我的回答可能是人谁忘了/不知道如何robot.txt的测试

+1

的可能重复(HTTP [是否有可能列出多个用户代理在同一行?]://计算器。 COM /问题/ 20294485/IS-IT-可以对列表多用户代理功能于一身的行) –

回答