将<noscript>隐藏其他静态内容给Google抓取工具吗？

Question

这应该是一个容易的人：

请问<noscript>元素导致HTML页面只侍奉<noscript>标签内的内容，谷歌爬虫和隐藏我的静态内容的所有其他导致它如此不被索引？

谢谢！

Answer 1

否。抓取工具将会看到全部您的内容，均位于<noscript>元素和其他地方。

爬行器的行为与JavaScript关闭时的浏览器非常相似 - 它们会看到所有静态内容加上<noscript>的内容，但不会涉及任何与JavaScript相关的内容。

Answer 2

整个HTML文件是为响应GET请求而提供的。 Google应该遵守robots.txt，而不是以此标记的蜘蛛目录。