腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
搜索
关闭
文章
问答
(19)
视频
开发者手册
清单
用户
专栏
沙龙
全部问答
原创问答
Stack Exchange问答
更多筛选
回答情况:
全部
有回答
回答已采纳
提问时间:
不限
一周内
一月内
三月内
一年内
问题标签:
未找到与 相关的标签
筛选
重置
1
回答
停止
Metaflow
并行化foreach步骤
我最近开始使用
Metaflow
进行超参数搜索。我的所有参数都使用了foreach,如下所示:def start_hpo(self):谢谢
浏览 2
提问于2020-02-04
得票数 1
回答已采纳
1
回答
Netflix对Apache气流的
Metaflow
我有一个关于Apache气流和
Metaflow
()之间的区别的问题。据我所知,Apache气流只是一个作业调度程序,它运行任务。Netflix的
Metaflow
是一个数据流库,它以DAG的形式创建机器学习管道(可用数据流)。基本上意味着,
Metaflow
可以在Apache气流上执行吗? 我的理解正确吗?如果是,是否可以将
Metaflow
DAG转换为Apache气流DAG?
浏览 7
提问于2022-01-03
得票数 2
回答已采纳
1
回答
如何在
MetaFlow
中显示tqdm进度?
在运行
MetaFlow
Flow时,tqdm进度条直到最后一次迭代时才会显示,这违背了测量进度的目的。有没有办法强制
MetaFlow
打印出tqdm更新?
浏览 91
提问于2021-07-02
得票数 1
回答已采纳
1
回答
如何禁用失败的
Metaflow
任务的自动重试?
默认情况下,在管道错误输出之前,
MetaFlow
会多次重试失败的步骤。但是,当我使用pytest测试我的流时,这是不希望的--我只想让流快速失败。
浏览 19
提问于2021-08-13
得票数 0
回答已采纳
1
回答
如何从Python定义中设置
MetaFlow
的-max-workers标志?
MetaFlow
允许您使用 CLI标志(ref:)。不过,我不想每次都这样。 是否可以从--max-workers定义中设置FlowSpec标志(不使用FlowSpec)?
浏览 8
提问于2021-07-15
得票数 0
回答已采纳
2
回答
如何使用
metaflow
从s3获取元数据?
另外,我知道
metaflow
会自动将元数据写入s3。那么我如何使用jupyter notebook从s3获取元数据呢?我能想到的唯一方法就是使用boto3。我想可能会有更好的工具可用。
浏览 6
提问于2020-01-11
得票数 1
1
回答
如何在
MetaFlow
中以工件的形式存储和检索图形?
如何将绘图另存为
MetaFlow
中的数据工件?绘图库通常会将您写出到磁盘上的文件。之后如何查看该图?
浏览 19
提问于2021-08-09
得票数 1
回答已采纳
1
回答
告诉
metaflow
使用conda装饰器使用pip安装包
在AWS上运行时,我通常会定义一个步骤: @batch(cpu=1, memory=5000)@step do stuff... 但是,我正在使用深入学习的库(MXnet/tensorflow/pytorch),它们在conda上并不是特别新,最好使用pip安装。 如何定义此步骤的pip依赖项?
浏览 38
提问于2020-12-07
得票数 2
1
回答
Metaflow
:在浏览器中访问元数据/元流服务URL时“缺少身份验证令牌”
我目前正在
Metaflow
上做实验。我遵循了文档,并能够使用给定的云形成模板部署aws安装程序。我的问题是为什么我总是得到一个:当我在浏览器中访问
METAFLOW
_SERVICE_URL时,即使我确保在创建cloudformation
浏览 11
提问于2020-01-09
得票数 1
1
回答
Metaflow
-从S3中删除conda文件夹后,AWS批处理任务失败
显然,
metaflow
.plugins.conda.batch_bootstrap试图使用与conda.dependencies文件中的环境id相关联的cache_urls来下载conda包。
浏览 7
提问于2020-02-07
得票数 1
回答已采纳
1
回答
如何为AWS ALB将不同的服务映射到相同主机的不同路径?
ingress.yaml{{- $fullName := include "
metaflow
-ui.fullname" . -}}{{- $svcPort := .Values.service.port -}}--- apiVersion: extensions/v1be
浏览 5
修改于2022-08-21
得票数 1
回答已采纳
1
回答
GPU如何使用的元流解释
据我理解,
Metaflow
使用AWS批处理,它使用ECS/Docker。然后,码头实例需要在码头容器()内的GPU驱动程序能够访问GPU。或者
Metaflow
是否使用服务,例如AWS弹性推理来动态分配GPU,即使批/ECS EC2实例没有GPU?
Metaflow
是在码头容器内安装GPU驱动程序还是在内部使用NVIDIA容器工具包? @资源是我们在Python代码中使用GPU所需要的全部吗?
浏览 3
提问于2020-07-07
得票数 0
2
回答
从一个python文件中导入一个函数,并将该函数用作元流中的步骤函数。
#utils.py print("hello world") from
metaflow
import FlowSpec, step, Parameterfrom
metaflow
import
Metaflow
return p class BranchFlow
浏览 5
修改于2022-08-19
得票数 0
回答已采纳
2
回答
获取元流项目的s3 url路径
我查看了
Metaflow
的DataArtifact类,但没有看到明显的s3路径属性。
浏览 21
提问于2020-07-11
得票数 1
回答已采纳
1
回答
我能腌制一个拉链的东西吗?
我不是自己做腌制,而是使用一个库
Metaflow
来对其中的对象进行腌制,所以我想找到一种用
Metaflow
存储我的模型的方法。
浏览 2
提问于2020-12-08
得票数 0
1
回答
如何在元流中创建嵌套分支?
我使用
metaflow
创建一个文本处理管道,如下所示: ______ D最后,所有分支都在H.连接,下面是实现此逻辑的代码: def end(self):在运行pytho
浏览 5
修改于2021-04-30
得票数 4
回答已采纳
1
回答
Boto3配置文件创建: botocore.exceptions.ProfileNotFound:找不到配置配置文件
secret_class =get_secret(名称、区域、配置文件) get_secret session = boto3.session.Session(profile_name=profile)中的文件“/
metaflow
浏览 0
提问于2020-01-25
得票数 2
回答已采纳
1
回答
未存储在S3中的元流数据对象
我有以下
Metaflow
文件,它通过以下步骤成功运行: @step import redshift self.event_matrix
浏览 20
提问于2020-01-02
得票数 3
回答已采纳
1
回答
自定义Akka流
我有这样的想法; val wrappedFlow = Flow.fromGraph
浏览 2
修改于2018-06-15
得票数 1
回答已采纳
领券