机器人meta和robots.txt

Question

我在我的php头中使用条件语句来排除机器人后面的一些文件。 但是暂时我不得不封锁一些这些网页，因为我的网站表现不佳。在这个阶段，我使用了robots.txt来排除它们。但他们仍然没有追随Meta Index。

Google会否认为这种矛盾是不好的？

Answer 1

如果您屏蔽robots.txt中的网页，则任何遵从robots.txt的爬网程序都不会加载该网页，因此也不会看到漫游器元标记。元标记被有效地忽略。