问我们如何从Google BigQuery导入大型数据集到R？
EN

Stack Overflow用户

提问于 2019-05-30 19:33:22

回答 1查看 502关注 0票数 1

我们如何从Google BigQuery导入大型数据集到R？

我尝试使用BigQuery包并尝试导入。我能够成功地导入较小的数据集，但不能导入大型的数据集。

sql <- "SELECT * FROM Table name"

todo_copies <- query_exec(sql, project = 'data-warehouse', dataset = 'name', useLegacySql = FALSE)

字节处理错误:请求的资源太大，无法返回responseTooLarge

发布于 2019-09-19 00:02:46

这条消息引用了一个与最大响应尺寸有关的限制，用于BQ中的查询作业。如果您是写入拆下表，就可以管理它；但是，这个选项很可能不能满足您的需要。

请注意，R文档表明执政官被反对支持bq_project_query，并从其他线程(如如何从BigQuery将大型数据集加载到R？ )中向尺寸特性推荐

“当出现错误responseTooLarge时，应该调整它”

票数 1

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/56384580

复制

相似问题

问我们如何从Google BigQuery导入大型数据集到R？EN