SAN存储，已经更新到128GFC了

全文概览

在数据爆炸式增长的今天，存储系统的重要性不言而喻。而在企业级存储领域，高性能、高可靠的存储网络是支撑关键业务的基石。我们常听到软件定义存储（SDS）基于灵活的以太网构建，但为何传统的存储区域网络（SAN）却长期以来依赖于看似“小众”的光纤通道（FC）网络？FC与以太网在设计理念、传输效率和可靠性上有哪些本质区别，导致它们在存储领域扮演着不同的角色？

面对以太网的飞速发展和成本优势，光纤通道是如何通过技术创新（如PAM-4编码、NVMe-oF支持）来应对挑战，并持续演进以满足未来更高性能、更低延迟需求的？本文将深入探讨光纤通道的技术特性、演进路径以及其在现代存储架构中的独特价值，带您了解这一关键技术为何能在高性能存储领域保持其不可替代的地位。

阅读收获

• 理解光纤通道（FC）与以太网在存储网络应用中的核心差异及其背后的设计哲学。
• 掌握光纤通道技术从1Gb到128Gb乃至更高速度的演进历程和关键技术里程碑。
• 了解PAM-4编码技术如何帮助光纤通道在现有介质上实现更高的数据传输速率。
• 明确128GFC标准在性能、兼容性、易用性和传输距离等方面的关键技术要求。

SAN 存储为何依赖FC网络，而软件定义存储（SDS）基于以太网？

光纤通道 (FC) 和以太网 (Ethernet) 在数据传输效率、稳定性、成本以及适用场景（SAN 与分布式存储）上存在显著差异，这源于它们不同的设计初衷和演进路径。

以下是这些差异的比较和分析：

FC 链路与以太网数据交换的差异比较：

SAN 存储依靠 FC 链路，而分布式存储基于以太网的原因：

• SAN 存储的需求: SAN (Storage Area Network) 主要提供块级存储服务，常用于对性能、延迟和可靠性要求极高的应用，如数据库、虚拟化环境。
  • 低延迟和高吞吐: 块级 I/O 操作通常很小且频繁，要求网络具有极低的端到端延迟和极高的吞吐能力。FC 专为此设计，协议开销低，硬件直连，能够快速响应存储请求。
  • 无损传输: 存储数据绝对不允许丢失。FC 的 Credit Flow Control 机制在硬件层面保证了零丢包，这对于保证数据完整性和应用程序的稳定性至关重要。
  • 可预测性: 块级存储 I/O 对网络的时延和带宽有很高的可预测性要求，任何网络不稳定或拥塞都可能直接影响应用性能甚至导致故障。FC 的独立网络和专用协议提供了高度的可预测性。
• 分布式存储的需求: 分布式存储通常构建在大量普通服务器和存储设备之上，通过软件实现数据的冗余、一致性和扩展性。它通常服务于文件或对象存储，或对延迟要求相对不那么极致的块存储场景。
  • 成本效益和灵活性: 分布式存储追求横向扩展和低成本。基于以太网的硬件具有巨大的规模经济效应，成本低廉且灵活易部署。
  • 软件定义的能力: 分布式存储的核心逻辑在软件层实现。以太网作为通用的传输层，可以承载各种高层协议（如 NFS, SMB, S3, iSCSI, NVMe-oF），方便软件层实现复杂的存储功能。
  • 容忍一定程度的网络问题: 分布式存储的软件层通常具备数据冗余和错误处理机制，可以在一定程度上容忍底层网络的延迟波动或少量丢包（通过重传等机制弥补）。

造成两种技术架构演进方向差异的因素：

1. 设计哲学差异:
   • FC: 为存储而生，聚焦于构建一个高度可靠、高性能、无损的存储网络，牺牲了通用性和部分成本。其演进始终围绕如何更快、更稳定地传输块数据。
   • 以太网: 为通用连接而生，追求广泛兼容、灵活组网和低成本。其演进侧重于提高带宽、增加端口密度、支持更多协议，并逐渐通过增强功能（如 PFC）来满足对可靠性要求更高的应用，但其核心仍然是通用性。
2. 协议栈差异:
   • FC 的精简协议栈是其低延迟和高效率的关键。
   • 以太网使用分层协议栈（如 TCP/IP），虽然通用性强，但增加了协议处理开销和潜在的延迟（尤其是在处理网络拥塞时）。尽管 RDMA 技术（如 RoCE）能降低以太网上的延迟和 CPU 开销，但管理和部署相对复杂。
3. 拥塞控制机制:
   • FC 的硬件级 Credit Flow Control 是一种高效且完全无损的机制，是其稳定性的基石。
   • 以太网传统的拥塞控制机制（如 TCP 的窗口控制）依赖端到端的软件协调，可能导致缓冲队列溢出和丢包。虽然 PFC 可以实现链路层无损，但需要在网络中的所有节点上正确配置和管理，且不能解决更复杂的拥塞场景。
4. 市场驱动力和生态系统:
   • FC 市场相对小众，主要由少数几家厂商主导，技术发展更多由高端企业存储需求驱动。
   • 以太网市场极其庞大，由 PC、服务器、消费电子、数据中心等多种应用共同驱动，技术发展速度极快，硬件成本迅速下降，形成庞大的生态系统和人才基础。
5. 架构演进:
   • SAN: 倾向于构建高度集中、高性能的共享存储资源池，网络是连接服务器和存储设备的“高速通道”。FC 天然适合这种架构。
   • 分布式存储: 倾向于构建大规模、横向扩展的存储集群，强调节点的分布式协作和软件的智能化管理。以太网的通用性、低成本和灵活性更符合这种去中心化、软件定义的需求。

FC 之所以成为传统 SAN 的首选，在于其“为存储而生”的设计理念，提供了块级存储所需的极低延迟、高吞吐、无损和可预测的传输能力。而分布式存储之所以能基于以太网，是因为其软件定义架构可以在一定程度上弥补以太网在传统意义上的可靠性不足，同时充分利用以太网的成本优势和灵活性来实现大规模横向扩展。

两种技术的演进方向差异，根本上是它们最初的设计目标和所服务的主要市场需求不同所决定的。FC 专注于深耕高性能、高可靠的块存储网络，而以太网则在不断提高速度和通用性的同时，通过增强功能逐步渗透到对可靠性要求更高的应用领域，包括基于以太网的存储协议（如 iSCSI, NVMe-oF over Ethernet）。未来，随着技术的融合和发展，以太网在存储领域的应用会越来越广泛，但 FC 在对极端性能和可靠性有要求的关键 SAN 场景仍将保持其优势。

光纤通道行业如何创新

光纤通道行业如何创新

展示了光纤通道行业的创新流程，其核心是一个持续的循环，主要由以下几个要素和参与者构成：

1. 驱动力与输入:
   • 创新的起点是最终用户影响，这直接产生了需求和要求。
   • 行业内部也产生各种光纤通道创新和存储创新。
2. 关键参与者与职责:
   • 光纤通道行业协会 (市场): 主要负责收集来自行业（包括最终用户）的需求和要求。同时，它也向外界输出新闻/分析师资料和进行教育推广。
   • INCITS T11 标准组织 (技术):* 这是一个负责技术标准的组织，它接收行业内的光纤通道创新和存储创新作为输入，并负责制定相关的标准和配置文件。

光纤通道技术发展时间线

光纤通道技术发展时间线

• 速度演进: 光纤通道的速度随着时间推移稳步提升，从最初的 1Gb 发展到 2023 年的 128Gb (第八代)。关键速度节点包括 1Gb (1997)、2Gb (2001)、4Gb (2005)、8Gb (2008)、16Gb (2012)、32Gb (2016 - Gen6)、64Gb (2021 - Gen7) 和 128Gb (2023 - Gen8)。
• 重要里程碑:
  • 1988年：协议开发工作开始。
  • 1999年：光纤通道行业协会 (FCIA) 成立。
• 相关技术与概念: 在光纤通道的发展过程中，出现并引入了多种相关的技术和概念，包括：
  • 仲裁环 (Arbitrated Loop)
  • 虚拟化 NPIV (Virtualization NPIV)
  • FCoE (以太网光纤通道)
  • Fabric 服务 (Fabric Services)
  • 融合网络 (Converged Networks)
  • NVMe Fabrics 光纤通道 (NVMe Fabrics Fibre Channel)
  • 自治SAN (Autonomous SANs)

• 补充说明:
  • 表格涵盖了从 8GFC 到未来规划的 1TFC (1024GFC) 的多代速度。
  • 不同世代使用了不同的信号编码方式 (NRZ 和 PAM-4)。
  • 提供了每代技术规范大致完成的年份（由 T11 组织）。
  • 提供了每代产品大致进入市场可用的年份。对于未来的速度 (256GFC 及以上)，市场可用性取决于市场需求。
  • 重要特性: 光纤通道的每代速度通常保持对前两代的向后兼容性。
  • 吞吐量数字为代表值，受线速和数据载荷影响。
  • 表格中的未来日期为估计值。

编码技术从 NRZ 升级到 PAM-4 的背景和技术升级

1. 背景 (为何需要升级？):

• 提高数据传输速率的需求: 随着存储系统和应用对带宽的需求不断增长，光纤通道需要支持越来越高的数据传输速度（如 64Gb/s, 128Gb/s 甚至更高）。
• NRZ 编码的局限性: 传统的 NRZ (Non-Return-to-Zero) 编码在较低的速度下工作良好，但当数据速率非常高时，会遇到以下挑战：
  • 信号衰减和失真: 在高速传输时，信号在电缆或光纤中的衰减和色散更为严重，导致信号波形模糊、眼图闭合。
  • 信道带宽限制: 物理传输介质（如铜缆或光纤）的带宽是有限的。在极高的数据速率下，NRZ 信号的频率成分会超出信道的有效带宽，导致信号无法正确传输。
  • 串扰和噪声: 高速信号更容易受到串扰和噪声的干扰。

为了在现有物理介质上实现更高的数据速率，需要在单位时间内传输更多的数据，而不仅仅是简单地提高信号的开关速度（波特率）。

2. 技术升级 (PAM-4 的原理和优势):

• PAM-4 编码原理: PAM-4 (Pulse Amplitude Modulation - 4 Level) 是一种脉冲幅度调制技术。与 NRZ 只使用两个电压电平（代表 0 和 1）不同，PAM-4 使用四个不同的电压电平来表示数据。
  • 每个 PAM-4 符号可以表示 2 个比特的数据（00, 01, 10, 11）。
  • 例如，可以定义四个电平分别代表这四种比特组合。
• PAM-4 的优势:
  • 数据传输效率翻倍: 在相同的符号速率（baud rate，即每秒钟传输的符号数）下，PAM-4 可以传输两倍于 NRZ 的数据量。这意味着可以在不显著提高信号开关速度的情况下，将数据速率提高一倍。
  • 缓解信道带宽压力: 由于在相同数据速率下，PAM-4 的符号速率是 NRZ 的一半，这有效降低了信号的最高频率成分，从而更好地适应有限的信道带宽。这使得利用现有或改良后的物理介质实现更高速度成为可能。

列出了开发和实现 128GFC 光纤通道标准的主要要求。这些要求旨在确保新一代技术的性能提升、可靠性、易用性以及与现有基础设施的兼容性。

128GFC 光纤通道标准的主要要求涵盖以下几个方面：

• 性能:
  • 吞吐量: 必须达到其前一代 64GFC 吞吐量的两倍。
  • 纠错: 需要实现极高的可靠性，校正后的误码率 (BER) 目标为1e-15。
• 兼容性与易用性:
  • 向后兼容性: 128GFC 必须向后兼容 64GFC 和 32GFC。
  • “即插即用”: 这被视为光纤通道开发的**“必须具备”**的要求，旨在通过向后兼容性和即插即用能力，方便地利用现有基础设施支持新速度。
• 传输距离:
  • 支持不同的连接方案以满足不同距离需求：
    • 短距离: 使用 OM4/OM5 光缆的多模光纤方案，支持距离达到100米。
    • 远距离: 使用单模光纤方案，支持距离达到10公里。
• 电缆组件重用:
  • 要求能够重用现有的电缆组件，具体体现在：
    • 使用通用的 LC 连接器。
    • 设计上需兼容支持 128GFC 的产品（幻灯片中提到 SFP+ 外形尺寸）。

延伸思考

这次分享的内容就到这里了，或许以下几个问题，能够启发你更多的思考，欢迎留言，说说你的想法~

1. 随着以太网技术（如RDMA、PFC）的不断成熟和成本下降，未来基于以太网的存储协议（如NVMe-oF over Ethernet）是否会完全取代光纤通道在高性能SAN领域的地位？
2. 光纤通道行业如何平衡对极致性能和可靠性的追求与降低成本、提高部署灵活性的需求？
3. NVMe Fabrics技术在光纤通道上的应用（NVMe-oF Fibre Channel）将如何改变传统的块存储访问模式和SAN的管理方式？

原文标题：Fibre Channel Gen8 Update

Notice：Human's prompt, Datasets by Gemini-2.5-flash-thinking

---【本文完】---