页面只在向下滚动时加载

Question

我需要为整个页面抓取元素，但只有一部分会加载，直到向下滚动为止。反正有抵消这个吗？我可以通过运行滚动到底层函数来解决这个问题，但如果它们是一个更干净的方法，这将是很好的。

Answer 1

这是完成此操作的代码。您可以将其插入直接进入控制台或它注入到你的履带

window.scrollTo(0,document.body.scrollHeight); 

你也可以把这个包在setInterval函数递增随着时间的推移。 下面有这样一个例子：

setInterval(function() { 
document.body.scrollTop = document.body.scrollHeight; 
}, 50); 

编辑：抱歉，我没在那里你提到，你知道你可以做到这一点你的问题的最后一部分。你在和什么样的爬虫一起工作。这将有助于回答你的问题。 看看这个例子： Scroll Automatically to the Bottom of the Page