基于日期的python抓取表

Question

从一周前开始，我一直试图从这个网站https://www.bi.go.id/id/moneter/informasi-kurs/transaksi-bi/Default.aspx上刮一张表，但是我不知道该写什么，我很困惑。我正在试图从2015年至2020年(2015年11月20日至2020年11月20日)清点库尔交易表。

但是问题是，默认日期和我选择的日期之间的链接仍然是same.please帮助我，谢谢！

import requests
from bs4 import BeautifulSoup
import pandas as pd
headers={
"User-Agent":"Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3112.101 Safari/537.36",
"X-Requested-With":"XMLHttpRequest"
}
url = "https://www.bi.go.id/id/moneter/informasi-kurs/transaksi-bi/Default.aspx"
import requests
from lxml import html
response = requests.get(url)
content= response.content
print(content)

Answer 1

您需要使用硒。您可以安装Selenium，然后可以安装一个司机。我使用铬，然后一旦您安装它，请记下该路径并将您的DRIVER_PATH设置为

在下面的代码中，我所做的基本上是请求您发布的链接，然后输入您可以更改的日期。最后，我点击提交按钮。它在日期范围内生成表。现在，您可以编写后续代码，以便从表中刮取信息。

码

import requests
from selenium import webdriver

DRIVER_PATH = 'Yourpath/chromedriver'
driver = webdriver.Chrome(executable_path=DRIVER_PATH)
driver.get('https://www.bi.go.id/id/moneter/informasi-kurs/transaksi-bi/Default.aspx')
start_date = driver.find_element_by_id("ctl00_PlaceHolderMain_biWebKursTransaksiBI_txtFrom")
start_date.send_keys("15-Nov-20")
end_date = driver.find_element_by_id("ctl00_PlaceHolderMain_biWebKursTransaksiBI_txtTo")
end_date.send_keys("20-Nov-20")
submit_button = driver.find_element_by_id("ctl00_PlaceHolderMain_biWebKursTransaksiBI_btnSearch1").click()