首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何在BlueData上使用Tensorflow读取和写入数据?

如何在BlueData上使用Tensorflow读取和写入数据?
EN

Stack Overflow用户
提问于 2019-11-07 05:11:13
回答 1查看 84关注 0票数 0

我希望能够直接从TensorFlow使用BlueData的datatap

使用pyspark,我可以这样做:

代码语言:javascript
复制
df.write.parquet('dtap://OtherDataTap/airline-safety_zero_incidents.parquet')

请注意,我不需要设置任何库-它已准备好开箱即用。

通过DataTap从Tensorflow读取/写入数据需要做什么?

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2019-11-07 05:11:13

根据文档:http://docs.bluedata.com/40_datatap-tensorflow-support

代码语言:javascript
复制
import tensorflow as tf
import os
from tensorflow.python.framework.versions import CXX11_ABI_FLAG

CXX11_ABI_FLAG

bdfs_file_system_library = os.path.join("/opt/bluedata","libbdfs_file_system_shared_r1_9.so")
tf.load_file_system_library(bdfs_file_system_library)

with tf.gfile.Open("dtap://TenantStorage/tmp/tensorflow/dtap.txt", 'w') as f:
    f.write("This is the dtap test file")

with tf.gfile.Open("dtap://TenantStorage/tmp/tensorflow/dtap.txt", 'r') as f:
    content = f.read() 
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/58738544

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档