如何使用BeautifulSoup实时更新网站？

Question

我一直试图从worldometer.com(https://www.worldometers.info/)中提取实时数据，特别是健康部分数据。我能够提取标题(例如：“今天的传染病死亡”，但我不能提取活数据(数字))。有人能帮我吗？

Answer 1

活动数据(数字)由JavaScript填充，您可以使用像selenium这样的自动化工具轻松地获取它。下面是一个例子。请运行代码。

剧本：

import time
from bs4 import BeautifulSoup
from selenium import webdriver
from webdriver_manager.chrome import ChromeDriverManager

url = "https://www.worldometers.info/"

driver = webdriver.Chrome(ChromeDriverManager().install())
driver.maximize_window()
time.sleep(5)
driver.get(url)
time.sleep(5)


soup = BeautifulSoup(driver.page_source, 'lxml')

num  = soup.select_one('div#c49 > div > span.counter-number')
print(num.text)

输出：

2,134,658