0
User-Agent:*
Disallow:/
User-Agent: Googlebot
User-Agent: Googlebot-Mobile
User-Agent: Googlebot-Image
User-Agent: Bingbot
Allow:/
这是否允许所有4个机器人或只允许Bingbot并禁止所有内容?如何在robot.txt中允许多个机器人
编辑 我的回答可能是人谁忘了/不知道如何robot.txt的测试
的可能重复(HTTP [是否有可能列出多个用户代理在同一行?]://计算器。 COM /问题/ 20294485/IS-IT-可以对列表多用户代理功能于一身的行) –