回答情况：
提问时间：
问题标签：
当我想使用NVProf来解决带有--metrics all的NCCL问题时，分析结果总是返回如下==2781== Profiling application: ./nccl_example 2 16未分析任何事件/指标。我的简单nccl程序#inc
浏览 29修改于2021-05-27得票数 0
回答已采纳
1回答
我使用的是ubuntu16.04，运行后，我按照关于nvidia 网站的说明更新nccl：但是，当我想通过locate nccl| grep "libnccl.so" | tail -n1 | sed -r 's/^.*\.so\.
浏览 0提问于2019-08-27得票数 1
回答已采纳
我以前没有听说过NCCL，我正在研究它的功能。以下是NVIDIA网站上关于NCCL的说明：
那么，MPI只用于轻松地调度集群上的作业吗？对于CPU上的分布式深度学
浏览 2修改于2020-09-15得票数 11
30, in get_torch_default_comm如果我运行torch.cuda.nccl.version开发人员建议运行：print(torch.cuda.nccl.is_available(x))
这给了我False。这是否意味着PyTorch和NCCL存在问题？
浏览 19修改于2021-10-13得票数 0
回答已采纳
2回答
我不确定NVIDIA Collective Communications Library (NCCL)是否安装在我的目录中？有没有办法检查NCCL
浏览 296提问于2021-04-07得票数 4
Python----------3.7.6
INFO:tensorflow:batch_all_reduce: 8 all-reduces with algorithm = nccl,INFO:tensorflow:batch_all_reduce: 8 all-reduces with algorithm = nccl, num_packs = 1, agg_small_grads_max_bytes
浏览 5提问于2020-02-07得票数 1
2回答
map-by slot \--oversubscribe \-x NCCL_SOCKET_IFNAME=bond0 \-x NCCL_IB_GID_INDEX=3 \
浏览 1213提问于2024-08-19
distributed/distributed_c10d.py", line 1489, in barrierRuntimeError: NCCLerror in: /pytorch/torch/lib/c10d/ProcessGroupNCCL.cpp:410, unhandled system error, NCCL version 2.4.8
浏览 229修改于2021-03-31得票数 16
同时构建NodeDef 'NcclAllReduce‘
我正在使用Windows，因此Nccl不可用。是否有可能强迫TensorFlow不使用这个库？
浏览 2提问于2018-06-05得票数 5
[0] NCCL INFO NET/Socket : Using [0]eth0:172.17.0.14<0>NCCL version 2.10.3+cuda10.27aea7
浏览 66修改于2022-10-09得票数 1
回答已采纳
____Loading package: @pcre//ERROR: C:/users/abhisek.panigrahi/appdata/local/temp/_bazel_abhisek.panigrahi/9tglboge/external/nccl_archive/BUILD:46:16: in linkopts attributeof
浏览 6提问于2017-11-21得票数 0
在Nvidia网站上，他们声称MXNet使用NCCL ()。但是，我没有从MXNet的github存储库中找到任何关于他们实际使用NCCL库的引用。在chainer博客中，他们还声称由于在chainer中使用了NCCL库，所以chainer在4个GPU上获得了比MXNet更好的性能。()我的第一个问题是，是否有NCCL库的MXNet版本？第二版，使用NCCL库可能会带来什么性能影响(即内存使用
浏览 4提问于2017-09-07得票数 2
问题是，我的训练脚本在没有镜像策略代码的情况下运行得很好，但是使用镜像策略时，我得到了一个关于NCCL的错误。有谁知道Windows上NCCL的替代修复是什么，或者tf的“contrib”部分已经消失了吗？
浏览 52提问于2020-04-01得票数 4
回答已采纳
我正在2080ti的Ubuntu18.04上安装CUDA10，CuDnn 7.3和NCCL2.3。我在NCCL部分遇到了麻烦。当我尝试编译Tensorflow时，它显示错误并且找不到NCCL-SLA.txt文件。但是当我搜索那个文件的时候，我也找不到它了？下面是我得到的错误代码：ERROR: /
浏览 0修改于2018-10-10得票数 0
在DGX-1系统(8xV100)中，有两种类型的NVlinks: NVlink-V1和NVlink-V2。 我们有没有办法明确指定用于p2p和集体通信的NVlink类型？
浏览 64修改于2021-09-30得票数 0
回答已采纳
对于NVIDIA Collective Communications Library (NCCL)版本2，NVIDIA要求用户首先注册为开发人员，然后才能访问安装文件。这将带来如何在容器中安装NCCL的挑战。对于个人使用，我们可以使用Dockerfile ADD命令将安装文件复制到容器中。但是，这种方法似乎不适合让其他人使用(或公开) Dockerfile。
浏览 0提问于2017-09-08得票数 0
从tensorflow 1.13来看，似乎没有像tf.contrib.nccl.allsum这样的api。= [dev_grads[dev][var_idx][0] for dev in devices] g = tf.contrib.nccl.all_sum(g)我查看了Tensorflow官方网站，似乎程
浏览 6提问于2020-02-28得票数 2
回答已采纳
init__.py", line 93, in backwardRuntimeError: NCCLerror in: /pytorch/torch/lib/c10d/ProcessGroupNCCL.cpp:272, unhandled system error
浏览 1修改于2019-05-13得票数 1
[E ProcessGroupNCCL.cpp:390] Some NCCL operations have failed or timed out.[E ProcessGroupNCCL.cpp:390] Some NCCL operations have failed or timed out.
浏览 300修改于2021-10-24得票数 3
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号