首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏运维民工

    rocky 8 如何配置infiniband网络

    建议安装Infiniband Support包。 dnf groupinstall -y "Infiniband"然后查看端口配型,需要安装mstflint工具dnf install mstflint检查ib的设备的pci地址[root@storage01 [root@storage01 ~]#重启完成后,我们可以用nmtui添加infiniband配置了可以修改成下述配置(注意:IPoIB 设备可在 Datagram 或 Connected 模式中配置。

    1.8K20编辑于 2023-06-06
  • 来自专栏网络虚拟化

    网络虚拟化:高效通信协议-InfiniBand介绍

    实验结果表明,与其他通信范例相比,将请求写入服务器并读取响应的性能提高了 10 倍。为了进一步扩大研究范围,所提出的通信范例已被替换为现实世界的分布式应用程序,并且性能提高了七倍。 此类网络结构的示例包括互联网广域 RDMA 协议 (iWARP) [1]、融合以太网上的 RDMA (RoCE) [2] 和 InfiniBand [2]。 所有通信均已实施和评估,结果表明,通过 RDMA 写入将请求写入服务器内存并通过 RDMA 读取读取响应,与其他通信范例相比,性能提高了 10 倍。 本文的其余部分安排如下。 相反,RoCE是InfiniBand贸易协会(ITA)发布的基于以太网的RDMA解决方案,支持可靠和不可靠的传输。InfiniBand 是一种先进的网络协议,具有低延迟和高带宽,常用于商用服务器。 例如,iWARP 和 RoCE 旨在与传统以太网协议兼容,InfiniBand 通过 IP over InfiniBand (IPOIB) 支持传统套接字应用。

    1.2K10编辑于 2023-09-07
  • 来自专栏高性能计算_PaperBaker

    InfiniBand与MPI

    IB(InfiniBand)和 RDMA(Remote Direct Memory Access)是一种高性能网络技术,通常用于加速数据传输。 多次接收:鉴于您创建了一个设置为10的max_recv_wr的QP,如果您的应用程序需要,您可能希望同时发布多个接收。但这完全取决于您的应用程序的用例。 如果您看到与`openib`相关的输出,那么程序可能正在使用InfiniBand。 对于Intel MPI,您可以使用`-genv`参数来检查或设置网络后端。 nemesis是它的网络模块。 要确定nemesis是否使用了InfiniBand,需要深入查看该nemesis网络模块的配置和使用的具体网络子模块。 nemesis可以与多种网络子模块一起使用,包括但不限于TCP、IB(InfiniBand)、MXM等。 在您的输出中,并没有直接提及是否使用了InfiniBand

    3.3K41编辑于 2023-09-14
  • 来自专栏运维民工

    Infiniband性能测试

    Port 1: State: Down Physical state: Polling Rate: 10 Capability mask: 0x02594868 Port GUID: 0x0002c90300b382a1 Link layer: InfiniBand Capability mask: 0x0259486a Port GUID: 0x0002c90300b382a2 Link layer: InfiniBand (none) (Lid 5) ibping statistics ---10 packets transmitted, 10 received, 0% packet loss, time 10000 msrtt RKey 0x8010100 VAddr 0x0055f4c06e7000 remote address: LID 0x01 QPN 0x0215 PSN 0x79fcd6 OUT 0x10 RKey

    2.5K00编辑于 2023-06-06
  • InfiniBand解决方案助力领先科技公司网络升级

    国家:越南行业:信息技术网络类型:InfiniBand网络方案类型:HPC网络案例亮点通过真实使用场景的全面测试,确保出色兼容性和高可用性,显著降低部署风险和运营成本。 借助现场技术支持,快速解决网络问题,并获取针对其数据中心的定制维护建议。建立高带宽、低延迟的InfiniBand网络,提升系统稳定性和性能,促进数字化转型。 在计算网络方面,该公司部署了NVIDIA® QM9790 InfiniBand交换机,并采用800G OSFP InfiniBand光模块,以实现脊交换机、叶交换机与GPU服务器之间的高速连接。 飞速(FS)的NVIDIA® Quantum-2 InfiniBand技术促使其升级为高性能、超低延迟且具备高度可扩展性的网络,充分发挥了RDMA和加速网络内计算等先进技术的优势。 采用高性能的InfiniBand网络进一步推动了公司的数字化转型。*文章来源于飞速(FS)官网

    16000编辑于 2025-04-01
  • 来自专栏网络虚拟化

    大模型数据中心网络InfiniBand与RoCE的终极对决!

    那么,在这篇文章中,我们将对InfiniBand和RoCE进行深入的比较,以帮助您找到适合您的AI数据中心网络架构。 ​ 带宽和延迟 InfiniBand和RoCE都提供了极高的带宽和低延迟的网络连接,使数据能够在极短的时间内传输到目的地。然而,InfiniBand在带宽和延迟方面具有轻微的优势。 此外,InfiniBand的延迟通常比RoCE低1-2毫秒。 易用性和可扩展性 RoCE网络架构相对简单,易于部署和维护。它基于标准的以太网协议,因此不需要额外的硬件或软件支持。 InfiniBand也提供了卓越的容错性和可靠性。它使用星型拓扑结构,支持冗余路径和链路聚合,以提高网络的可用性和稳定性。然而,与RoCE相比,InfiniBand的硬件成本和复杂性可能会更高。 另一方面,InfiniBand需要额外的硬件和软件支持,增加了总体拥有成本。 综上所述,无论您选择InfiniBand还是RoCE作为您的AI数据中心网络架构,两者都能满足高性能AI系统的需求。

    5.4K10编辑于 2023-10-02
  • 来自专栏毅硕HPC

    毅硕HPC | InfiniBand网络在HPC集群中的核心应用

    二、InfiniBand网络设计案例案例一:小型解决方案(约10节点)此案例适用于入门级HPC或AI集群,目标是实现一个简单、高性价比的基础架构。1.   管理网络:使用1台1GbE以太网交换机,用于操作系统安装、监控和带外管理。存储网络:使用1台10GbE以太网交换机,连接存储节点。此时存储流量不经过InfiniBand网络。2.   部署与配置要点:物理布局:为优化线缆长度,将InfiniBand交换机部署在机架中部位置。网络隔离:InfiniBand网络专门用于计算节点间的高速通信(IPC)和登录节点接入。 存储网络变更:存储节点直接接入InfiniBand网络,以提供更高的存储I/O性能,同时省去独立的10GbE存储网络交换机。管理网络:仍保留1GbE以太网用于带外管理。2.   三、InfiniBand网络实施全流程实施IB网络需严谨规划,避免“高开低走”。以下基于10+个HPC集群部署经验,提炼出可复用的六步实施法,聚焦易错点与优化技巧。

    73710编辑于 2026-01-07
  • 来自专栏山河已无恙

    Linux 环境下 IB(InfiniBand) 组网认知

    InfiniBand的设计目标是为数据中心和企业级网络提供更好的性能和可扩展性。 (路由表提前算好),所以在每个中转站的扳道工只需要简单查一下线路图(实现就是个普通的数组查询),“到10号站的车该走n2出口”就行了,而不像快递网络一样去查“xxx区xxx号xxx大厦”该怎么走(实现中用哈希或者 InfiniBand子网管理器(SM)(InfiniBand 交换机):InfiniBand子网管理器是一个特殊的InfiniBand适配器,用于管理整个InfiniBand网络。 为此,需要在 InfiniBand 网络中确认 InfiniBand 适配器已启用 IPoIB 功能。 可以使用这些信息来评估网络性能和诊断问题。 在 InfiniBand 网络中使用 iperf3 时,建议使用 RDMA 选项(--rdma)以最大限度地利用 InfiniBand 网络的性能和特性。

    4K21编辑于 2024-04-26
  • 来自专栏鲜枣课堂

    InfiniBand,到底是个啥?

    尤其是今年以来,以ChatGPT为代表的AI大模型强势崛起,更是让InfiniBand的关注热度大涨。因为,GPT们所使用的网络,就是英伟达公司基于InfiniBand构建的。 InfiniBand网络架构 InfiniBand网络拓扑结构示意,如下图所示: InfiniBand是一种基于通道的结构,组成单元主要分为四类: · HCA(Host Channel Adapter 在InfiniBand 网络中,数据同样以数据包(最大4KB)的形式传输,采用的是串行方式。 InfiniBand的协议栈 InfiniBand协议同样采用了分层结构。 可以看出,InfiniBand拥有自己定义的1-4层格式,是一个完整的网络协议。端到端流量控制,是InfiniBand网络数据包发送和接收的基础,可以实现无损网络。 以早期的SDR(单数据速率)规范为例,1X链路的原始信号带宽为2.5Gbps,4X链路是10Gbps,12X链路是30Gbps。 1X链路的实际数据带宽为2.0Gbps(因为采用8b/10b编码)。

    4.2K10编辑于 2023-08-21
  • 来自专栏鲜枣课堂

    35页PPT,了解InfiniBand和RoCE

    43710编辑于 2024-01-29
  • Infiniband以太网,算力组网布线方案

    服务器→叶交换机→脊交换机布线(图2示),是构建高带宽、低延迟、可扩展数据中心网络的核心设计思路,使用叶脊(Spine-Leaf)网络架构将设备进行连接,其中服务器与叶交换机同处于一个SU内,连接距离较短

    21610编辑于 2026-03-17
  • 来自专栏云深知网络 可编程P4君

    Gartner:以太网的进步将终结 InfiniBand 在 AI 网络领域的领先地位

    Gartner 终于下场了 最新推出的新兴技术报告 由分析师Anushree Verma撰写 为生成式 AI 网络提供前瞻性的见解 核心观点 对于那些考虑 InfiniBand 的人,Verma写道, 有必要“通过评估基于 InfiniBand 的交换机与基于超以太网的交换机,重新评估网络选择的性能、可靠性、可扩展性和价格。” InfiniBand 鉴于GPU由单一供应商主导,InfiniBand 是生成式 AI 应用中以太网的可行替代方案;然而,InfiniBand网络的价格较高,并且没有开放的生态系统 InfiniBand 但是预计 30% 的生成式 AI 流量将在InfiniBand上运行,目前这一比例还不到 20% Gartner 认为它“具有可扩展性限制,并且需要特殊技能来管理”,这意味着一些网络设计人员会因为难以管理的复杂性避免使用 然而,鉴于此类网络的开放生态系统和可靠性,使用无损以太网或超以太网的融合以太网 (RoCE) 上的远程直接内存访问 (RDMA) 可能被证明是有效的替代方案 到 2028 年,45% 的生成式 AI 流量将在以太网上运行

    61010编辑于 2024-04-10
  • 来自专栏光纤通信

    InfiniBand和以太网有什么区别?

    InfiniBand和以太网的区别在于: 以太网使用以网络设备为中心的方法建立路由,主要面向低速网络InfiniBand在设计之初就致力于解决传统网络的缺陷,用软件定义的方法建立大规模且流量纯净的二层网络 答:InfiniBand和以太网都是网络技术,但有一些主要区别。以太网是一种广泛使用的网络标准,存在已久,而InfiniBand是一种高速网络技术,专门用于提供低延迟和高带宽通信。 以太网的运行速度通常为 1Gbps、10Gbps或100Gbps,而InfiniBand可以提供高达200Gbps 甚至更高的速度。 问:与以太网相比,使用InfiniBand有哪些优势? 答:是的,以太网有不同的类型,如10BASE-T、100BASE-TX 和 1000BASE-T。这些是指以太网技术的不同版本和速度。 问:什么是InfiniBand HDR? 以太网是一种广泛使用的成熟网络技术,支持各种仪器和应用。 问:InfiniBand如何提高网络可靠性? 答:InfiniBand提供高带宽和低延迟,有助于提高网络可靠性。

    2.9K10编辑于 2024-04-09
  • 10G~800G Infiniband物理层吞吐量、线速度、编码开销、带宽整理

    Infiniband专为高性能计算设计,采用原生RDMA技术,提供超低延迟和高吞吐量,支持无阻塞Fat-Tree拓扑,在大型模型训练(如千卡GPU集群)中能显著减少通信瓶颈,但其有别于以太网的物理层标准 今天整理10G~800G IB物理层吞吐量、线速度、编码开销、带宽,为各位在IB设备选型提供快速参考。IB物理层通道数支持1/2/4/8/12通道,本次选取常用可插拔光模块的4/8通道数汇总。

    30910编辑于 2025-11-10
  • 来自专栏星融元

    替代Infiniband交换机,星融元带来新一代HPC网络解决方案,优势明显

    如图: 图片 今天,这里我们主要讨论其网络层面。HPC 对网络的主要诉求是低时延、零丢包、高带宽。 以往,在这种高性能承载网络的选择上,人们通常会选用IB网络或RoCEv2网络,但InfiniBand(IB)解决方案其实暴露出了很多问题: 厂商垄断:目前只有一家厂商有成熟的IB产品&方案,厂商锁定,方案价格非常昂贵 兼容性低:InfiniBand采用单独的通讯协议,非TCP/IP协议族,无法做到与其他网络设备互通互访 售后服务响应不理想:IB专网运维依赖原厂,故障定位困难,且解决问题时间较长 供货周期长:受各种因素影响 星融元HPC网络解决方案 星融元的HPC网络解决方案依托的是自研的CX-N系列低时延交换机,Port to Port 转发时延低至400ns。 再看一组CX-N100G交换机和IB交换机进行相同应用并行计算,运行效率基本一致: 图片 所以说,星融元的HPC网络解决方案完全可以替换IB交换机,且对比传统的IB解决方案,星融元的HPC网络解决网络解决方案具有以下优势

    1.5K30编辑于 2023-02-14
  • 来自专栏有趣的django

    10.socket网络编程

    True: 7 conn, addr = server.accept() #阻塞 等待连接 8 print("new conn:",addr) 9 while True: 10 cmd.encode("utf-8")) #发送命令给server端 9 cmd_res_size = client.recv(1024) #接受server端发过来的命令结果信息长度 10 6 while True: 7 conn, addr = server.accept() 8 print("new conn:",addr) 9 while True: 10 6 while True: 7 conn, addr = server.accept() 8 print("new conn:",addr) 9 while True: 10 7 cmd = input(">>:").strip() 8 if len(cmd) == 0: continue 9 if cmd.startswith("get"): 10

    1.1K70发布于 2018-04-11
  • 来自专栏从零开始学 Web 前端

    10 - JavaSE之网络编程

    网络编程 网络通信协议分层思想 为什么要分层呢? ---- 参考模型 OSI七层模型 物理层、数据链路层、网络层、传输层、会话层、表示层、应用层 TCP/IP参考模型 应用层、传输层(TCP/UDP层)、网络层(IP层)、数据链路层、物理层 我们今天要讲的主要是传输层 在TCP/IP协议中,IP层主要负责网络主机的定位,数据传输的路由,由IP地址可以唯一确定Internet上的一台主机。 而TCP层则提供面向应用的可靠的或非可靠的数据传输机制,这是网络编程的主要对象,一般不需要关心IP层是如何处理数据的。 可靠的传输是要付出代价的,对数据内容正确性的检验必然占用计算机的处理时间和网络的带宽。因此TCP传输的效率不如UDP高。

    49240发布于 2018-08-31
  • 来自专栏FreeBuf

    网络安全这10

    10年前,智能手机还没有广泛普及,Windows 7才刚刚发布,而网络安全更是一个小众的圈子,远非如今媒体记者笔下的常客。 从一个孤岛到一个自行其道的小世界。 网络安全这10年,风雨有过,辉煌有过,曾谷底呆过,也曾见高楼起。一群白帽子,从独行者,侠客,到归于企业麾下或是走出创业的一条路,他们为网络世界的安全而战。 一批网络安全企业,从0到1,见证网络安全走向合规和产业化,而穿插其中的,是这10年来一个个或许你还依稀记得的安全事件…… 2020年,网络安全再启程之际,笔者却想和你,再走一遍这10年。 可以说,这一年,网络安全领域面临的威胁多种多样。 10年归0,2020年网络安全再启程!回顾20世纪的第2个十年,会发现,网络安全的一个个变革,似乎早就在10年间一个个看似普通的日子里埋下了伏笔。 那现在的我们,抽根烟,可以如常地谈起APT,网络战,说起5G的网还行,最近哪个公司又搞出了几亿数据泄露……尽管我们无法预测新的一个10年具体会发生什么,但是,从眼前出发,我们能知道: 大数据发展下,隐私数据安全与合规依然会是网络安全的热门

    1K20发布于 2020-02-20
  • 来自专栏林德熙的博客

    win10 uwp 网络编程

    上面传输的头,Head=Head+length 中的第二个Head,包含 传输者id,当前传输是传输的消息最后一段还是中间,当前传输 是服务器第消息

    63110编辑于 2022-08-09
  • 来自专栏学习之路

    【Linux网络#10】:Https协议原理

    在整个传输过程中,只有在用户层数据是明文的,而网络中的传输数据始终处于加密状态。 HTTPS 也是一个应用层协议. 只是 在 HTTP 协议的基础上引入了一个加密层. 加密方式的定义? 二、HTTPS 工作方案 既然要保证数据安全, 就需要进行 “加密”,网络传输中不再直接传输明文了, 而是加密之后的 “密文”. 由于中间的网络设备没有私钥, 即使截获了数据, 也无法还原出内部的原文, 也就无法获取到对称密钥(真的吗?) 这对密钥对就是用来在网络通信中进行明文加密以及数字签名的。 常见问题 为什么摘要内容在网络传输的时候一定要加密形成签名? MD 5 特性 定长: 不论输入字符串的长度如何,生成的 MD5 值都是固定长度(16 字节或 32 字节)。

    55810编辑于 2025-06-02
领券