0
A
回答
2
这是有关雅虎：
通过加载JavaScript内容也将阻止它。
一个iframe我不认为会，因为它可以看到源代码并最终可以抓取它（除非机器人文件将该文件指定为不可破译的或元标记（并且仅适用于符合robots.txt的蜘蛛）
0
相关问题
- 1. 停止部分页面被搜索引擎索引？
- 2. 阻止搜索引擎索引网页
- 3. 防止搜索引擎索引页面上无关内容的方法
- 4. jQuery搜索引擎/页面
- 5. 我想阻止搜索引擎在WordPress第一页后索引分类
- 6. 如何停止将搜索引擎编入索引维护页面
- 7. 如何仅在产品页面上阻止搜索引擎索引？
- 8. 如何防止搜索引擎索引的常用实用词没有JS
- 9. 如何防止搜索引擎将ajax生成的内容编入索引
- 10. 如何防止搜索引擎将AJAX生成的内容编入索引？
- 11. 搜索引擎Magento的404页面
- 12. 搜索引擎的动态页面
- 13. 我如何获得谷歌搜索引擎只搜索图片
- 14. Opencart作为搜索引擎优化网页的搜索页面
- 15. Google（搜索引擎）对于asp.net页面的索引建议
- 16. 如何让我的html页面搜索引擎更加友好
- 17. TYPO3索引搜索引擎 - 并非所有的页面内容被索引
- 18. 客户端部分页面呈现和搜索引擎
- 19. 如何避免一些页面被搜索引擎编入索引？
- 20. 全部搜索引擎
- 21. 搜索引擎显示某些页面
- 22. 如何让搜索引擎索引页面的所有语言变体？
- 23. 搜索引擎中的倒排索引
- 24. 网页如何被搜索引擎索引？
- 25. 防止Apache 2搜索/索引
- 26. 带搜索引擎的PHP搜索引擎
- 27. 静态搜索引擎优化友好的页面生成与redux反应，我只需要索引页
- 28. 搜索引擎的终止索引过程
- 29. 的NodeJS搜索引擎索引的HTML5网页应用后台
- 30. 如何让某些页面不被搜索引擎编入索引？
robots.txt的是一时的链接，而不是一个页面中的各个内容相关。 – 2009-06-23 10:24:34