使用selenium进行数据抓取？

Question

我正在从一个网站上抓取数据，该网站正在以一定的时间间隔生成数据。根据我当前的代码，一旦浏览器抓取了数据并关闭了驱动程序连接，我就会关闭它。是否可以在不关闭浏览器窗口的情况下进行抓取，并在抓取完成后关闭驱动程序对象(我的意思是，网站每15分钟生成一次新数据，我希望我的驱动程序从初始窗口抓取数据，而不是每次都调用一个新窗口)？请告诉我一个可行的解决方案。

Answer 1

我认为您必须先使用time.sleep()，然后使用send.keys()向上滚动以加载新数据。