Robot.txt表示被阻止但不阻塞任何东西？

Question

所以我想在我的网站上获得广告。它正在审查一段时间，所以我正在做一些挖掘，也许有些东西阻止漫游器爬行。我今天发现了这个，告诉我它是否意味着什么。

第一：我在Google搜索控制台上提取并呈现我的网站。

我点击上图中右边的链接robots.txt的，它表明这一点：

所以后来我做了一个机器人抓取所有谷歌机器人，结果被允许在我的机器人文件。 活动文件：

在我的网站的文件管理器中，上面的图片是我实际的robots.txt文件。那么，由于我的漫游器文件阻止了第二阶段的验证，我的广告无法验证吗？

Answer 1

您的robots.txt只能阻止来自主机的网址。

来自Google Search Console的消息是关于外部网址的。该外部主机的robots.txt阻止对相关网址的抓取。

你可以对此做任何事情（除了自己托管外部脚本，但在所有情况下这当然是不可能的）。