我正在尝试找到一种方法,使用这个链接自动更新一个大型查询表:https://www6.sos.state.oh.us/ords/f?p=VOTERFTP:DOWNLOAD::FILE:NO:2:P2_PRODUCT_NUMBER:1
这个链接每周都会更新新的数据,我希望能够用这个新数据替换大查询表。我已经研究过可以将电子表格导出到Big Query,但这并不是一种简化的方法。
我该如何提交一个脚本来导入数据并将这些数据提供给Big Query呢?
发布于 2020-01-01 09:51:47
我假设您已经有了一个可以解析URL内容并将内容放在BigQuery中的工作脚本。基于此,我将推荐以下工作流程:
发布于 2019-12-25 06:32:53
您可以尝试使用带有Request library的Python等编程语言向页面发出HTTP请求,将数据保存到Pandas数据帧或CSV文件中,然后使用BigQuery libraries将数据推送到BigQuery表中。
https://stackoverflow.com/questions/59471277
复制相似问题