如何让msnbot不会在我的bot陷阱中结束？

是否有另一种方式告诉Bing不要抓取/传递/点击/输入某个链接，如谷歌的rel = nofollow？如何让msnbot不会在我的bot陷阱中结束？

msnbot/2.0b不断陷入我的僵尸陷阱。它不遵守锚标签rel =“nofollow”。

限制：

因为链接是一个动态参数关键我不能添加链接的robots.txt即 anypage.php xirh398？密钥对于每个会话都是唯一的，每5分钟更换一次。
我不能使用元标记，因为陷阱不是页面。
我不能使用HTTP头，因为那时机器人已经被禁止了。
我不想不断更新白名单。

2013-03-11 tim

nofollow！= nocrawl – 2013-03-11 14:15:37

好吧，无论我必须说的话。谷歌不会输入链接，我也不会去做。 – tim 2013-03-11 14:17:23

检出四种方法[从Bing索引删除网址]（http://www.bing.com/blogs/site_blogs/b/webmaster/archive/2009/06/08/how-to-remove-urls-from-我们的索引扩展-edition.aspx）。您也可以使用[必应网站管理员工具]（http://www.bing.com/toolbox/webmaster）指定必应如何处理您的网站。 – 2013-04-01 13:33:03

它不服从锚标记相对= “nofollow”。

nofollow表示“在搜索结果中不要加权这个链接”。这并不意味着“这不是一个真正的联系，不要跟着它”。（是的，那是不直观的）。

如果您希望优质机器人不在您网站的某个部分，请告诉他们关于它的一部分。

来源

2013-03-11 14:42:08 Quentin

如何让msnbot不会在我的bot陷阱中结束？

回答

相关问题