0
A
回答
1
这将阻止抓取的所有网址的机器人(在根()?),他们偶然发现了包含在他们的查询字符串s
。
相关问题
- 1. 我的robots.txt是User-agent:* Disallow:/ feeds/Disallow:/ */_ /它的意思是什么?
- 2. 不完整的robots.txt,会发生什么?
- 3. 在Express中处理robots.txt的最聪明的方法是什么?
- 4. robots.txt中的块子目录
- 5. Python robotparser模块不会加载'robots.txt'
- 6. robots.txt中的加号意味着什么?
- 7. robot.txt允许而不是Disallow
- 8. Draftjs中的块是什么?
- 9. Django应用程序中robots.txt的推荐指令是什么?
- 10. robots.txt中的“唯一”关键字是什么?
- 11. 什么robots.txt意味着在这一行?
- 12. Nginx块robots.txt文件
- 13. Disallow Ctrl-C Perl
- 14. 机械化得到403错误是由于robots.txt的,但robots.txt的块没有
- 15. 块重写规则中的robots.txt
- 16. 什么是!在Scanf.Scanning模块中?
- 17. 仅包含'User-agent:*'的robots.txt的含义是什么?
- 18. 什么是LINKEDIT块
- 19. Ckeditor disallow img元素
- 20. 什么是“!”字符在nodejs模块名称中做什么?
- 21. vim中的块运动是什么?
- 22. Python 3中的“块”是什么意思?
- 23. 什么是扫描:Java中的块?
- 24. Handlebars中{{#_}} ... {{/ _}}块的含义是什么?
- 25. AngularJS中的模块究竟是什么?
- 26. CodeIgniter中的模块是什么?
- 27. 什么是Android上的“滑块中断”
- 28. Java中finally块的要点是什么?
- 29. Rails模块中的mattr_accessor是什么?
- 30. Perl中BEGIN块的作用是什么?
感谢您的回答! – 2010-09-06 03:20:43