首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >有没有可能用漂亮的汤从动态图中提取数据?

问有没有可能用漂亮的汤从动态图中提取数据?
EN

Stack Overflow用户
提问于 2018-01-21 12:34:42
回答 1查看 928关注 0票数 0

我正在使用Beautifulsoup和Python来尝试从位于下面的网站上的图表中提取每小时的价格,该图表基于将输入的日期和时间变量。

该图表位于以下网站:https://coinmarketcap.com/currencies/bitcoin/

图表的工作方式是,当您沿着价格线移动鼠标时,它会在右上角设置的给定日期范围内更改日期、时间和价格。当我查看源代码时,我能够知道这些详细信息存储在哪里,但随着鼠标在图表上移动,详细信息会发生变化。

我的问题是,是否可以传递日期和时间变量并从该图表返回价格,或者它在源代码中动态更改值的事实是否使这一点变得不可能?

我的意思的一个例子:我将有以下变量Date: 2017-12-15 Time: 04:49:51,我将使用这些变量在图中搜索相应的价格。

下面是随着鼠标沿图形移动而发生变化的代码部分的图片:

​

​

我想我可以想出如何以编程方式更改图形的日期范围,但我不知道您将如何设法获取特定的时间,因为如果不在图形上移动鼠标,就无法传递该时间。安迪的点子?

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2018-01-21 23:08:46

这里无需使用BeautifulSoup或selenium,直接从接口获取图形数据(查看网络流量即可发现)。

代码语言:javascript
复制
import requests

api_url = 'https://graphs2.coinmarketcap.com/currencies/bitcoin/'
r = requests.get(api_url)
json_data = r.json()

这将获得从2013年到现在的主要图表,每天一项。如果您希望获得每天包含更多项目的较小部分,则必须指定开始日期和结束日期。

下面的示例只获取当月的价格,每天96条。

代码语言:javascript
复制
import requests
from datetime import datetime

dt1 = int(datetime(2018, 1, 1, 0, 0, 0).timestamp() * 1000)
dt2 = int(datetime(2018, 1, 21, 0, 0, 0).timestamp() * 1000)
api_url = 'https://graphs2.coinmarketcap.com/currencies/bitcoin/{}/{}/'
r = requests.get(api_url.format(dt1, dt2))
json_data = r.json()

json_data是一个字典,它将所有数据保存在四个键中:'market_cap_by_available_supply'、'price_btc'、'price_usd'和'volume_usd'。每个键都映射到一个包含1714个项目的列表。这些项目中的每一项都是两个项目的列表,即时间戳和实际值。

所以现在我们可以创建一个新的字典,以日期为关键字,以价格字典为值。

代码语言:javascript
复制
from datetime import datetime

data = {}
for k,v in json_data.items():
    for i in v:
        t = str(datetime.fromtimestamp(i[0]/1000.0))
        if data.get(t):
            data[t][k] = '{:,}'.format(i[1])
        else:
            data[t] = {k: '{:,}'.format(i[1])}

你可以通过日期,例子,

代码语言:javascript
复制
print(data.get('2018-01-01 05:59:20'))

{'market_cap_by_available_supply': '231,350,986,890', 'price_btc': '1.0', 'price_usd': '13,791.6', 'volume_usd': '11,137,400,000'}

或者你可以选择一个特定的项目,例如美元价格。

代码语言:javascript
复制
print(data.get('2018-01-01 05:59:20', {}).get('price_usd'))

13,791.6
票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/48363722

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档