从本地计算机读取文件并使用google数据流写入BigQuery或google存储。

Question

是否有方法从本地计算机读取csv文件并使用google数据流将其写入大查询或存储？如果它存在，应该使用哪个跑步者？

所有google数据流示例要么从云中读取，要么写入云存储或大查询。

我使用DirectPipelineRunner从本地计算机读取和写入本地计算机。

Answer 1

DirectPipelineRunner应该能做到这一点；您可以使用TextIO从本地输入文件中读取数据，并使用BigQueryIO将其写入BigQuery。