从需要headers={“用户代理”、“cookie”、x-xsrf-token'}的主机获取json数据。

Question

有一个包含json数据集的服务器，我需要一个json数据集，我需要'user-agent'

• I
• ，我可以手动使用
• 登录到url，并使用chrome developer工具来读取上述json data
• 的请求头。我确定，应该发送到json端点的最低要求的头是'cookie‘、’xsrf token‘、不知道如何获得这些值，这样我就可以自动获取这些数据。我想使用请求模块获取我尝试使用selenium的数据
  • ，导航到公开这些标头值的网页，但不能获得所述的标头值(不确定selenium是否支持这种值)，
  • 是否有一种方法可以在请求头“面包屑”之后使用请求模块来获取这些头values...by？
  • 是否有其他模块擅长于此？
  • 请注意，我已经使用selenium成功地获取了所需的数据点，但selenium是资源繁重且容易崩溃的；通过使用具有标头值的请求模块，
  • 极大地简化了工作流，并使我的脚本具有可靠的

Answer 1

基于pguardiario的评论

会话、cookie和csrf-令牌由主机在对Origin发出请求时提供。需要使用这些值对带有JSON有效负载的端点进行后续请求。通过对Origin使用request.session()，然后在使用request.get(url，header)时更新标头。我能够访问json数据