继使用Nokogiri进行刮板的链接

Question

有没有使用Nokogiri进行刮板的链接的方法？我知道我可以提取href并将其打开，但我认为我看到了一种使用hpricot执行此操作的方法，并且想知道在Nokogiri中是否有类似的东西。

Answer 1

以下是使用Ruby，Nokigiri，Hpricot和Firebug的优秀screen scraping guide。

就我个人而言，我非常喜欢使用Mechanize，这是一个无头浏览器，用于屏幕抓取。您可以使用机械化来导航链接并填写表单，它将处理所有棘手的问题，如Cookie。