腾讯云「存储+智能」AI原生基础设施解决方案概要

主讲人：王致铭 丨 腾讯云 云存储高级产品经理

一、 产品定位与核心亮点

腾讯云「存储+智能」组合是一款专为企业出海及AI应用爆发设计的AI原生云存储基础设施。其核心技术属性在于将传统云原生架构（聚焦Web/APP端的架构复杂度与成本优化）升级为AI原生架构，底层深度融合对象存储（COS）与高性能分布式缓存引擎（GooseFS），并无缝内嵌数据万象（CI）处理引擎。

商业差异化卖点：

• 同源同构：支持公有云、分布式云、专有云的统一架构，支撑互联网应用、智能体、自动驾驶与具身智能底座。
• 近存储加工：数据处理引擎直接部署于存储底层，实现服务间调用零外网流量，消灭数据搬运成本。
• 标量+向量双管齐下：具备跨模态的智能检索服务（MetaInsight），突破传统元数据检索限制。
• 开箱即用PaaS/SaaS：提供从底层存储到上层SaaS（智能媒资托管SMH、企业网盘）的积木式搭建能力，研发人力投入预估减少90%（从1500人天缩减至150人天）。

二、 产品应用场景

目标受众：大模型研发团队、自动驾驶企业、出海电商、内容社交平台及需要构建内部SaaS工具（如网盘、相册）的企业。

业务痛点与应用困境：

1. AI基础设施挑战：应用交互体验提升和模型能力快速升级，导致客户面临检索效率低、安全合规要求高、数据处理效率低、集群利用率低、扩容速度慢及服务不稳定等瓶颈。
2. 数据价值沉睡：传统存储仅解决“云端备份”（1.0时代防丢失）和“内容加工”（2.0时代基础编辑）。在AI（3.0）时代，受众亟需针对AIGC转存分发、媒体库智能检索、知识库及AI数据中台的智能化增值赋能。
3. 版权与资产流失：UGC/PGC平台及私域电商面临盗版溯源难、员工内部数据泄漏、竞品爬取数据及引流截流（如群聊二维码）等管控盲区。

三、 应用框架和功能介绍

3.1 功能框架

产品采用“存储底座 + 处理管理双引擎 + 一站式软件搭建平台”三层架构：

• 存储底座：对象存储（COS）与 AI存储（GooseFS），负责数据的安全可靠与高性能吞吐。
• 处理管理双引擎（数据万象CI）：涵盖数据处理（近存储加工、自动化工作流、内容安全审核）与数据管理（智能检索MetaInsight，支持自然语言/图像检索及元数据管理）。
• 一站式软件搭建平台：智能媒资托管（SMH）及腾讯云企业网盘，提供封装好的Open API/SDK及独立SaaS应用。

3.2 硬核指标

• 对象存储 (COS)：
  • 服务可用性：99.995%
  • 数据持久性：12个9 (99.9999999999%)
  • 请求性能：高达 30,000 QPS
  • 管理规模与带宽：单集群管理 百EB级 数据，Tbps级 超大带宽。
  • 文件支持：最小存储限制 64KB。
  • 兼容性：全兼容 AWS S3 接口。
• AI 存储 (GooseFS)：
  • 单链接性能：10Gbps（逼近硬件极限）。
  • 文件访问延迟：亚毫秒级（4K小文件延迟从 ~40ms 降至 ~0.4ms，降低100倍）。
  • 存储吞吐带宽：从 15Gbps/PB 提升至 1.8Tbps/PB（提升120倍）。
  • 元数据 QPS：从 3w 提升至 30w（提升10倍）。
  • 规模与恢复：百亿级 元数据规模，集群异常 秒级恢复。
  • 协议支持：支持 POSIX / HDFS / S3 多协议。
• 处理管理效能：
  • AI训练效能：数据清洗和训练效果提升 1倍，耗时减少 50%。
  • 近存储处理速度：处理耗时加快 30%。
  • 视频处理：H.266 编码使体积再减 50%，边转边播使成本下降 60%。
  • 内容审核成本：云原生审核节省 30% 审核成本（免除外网流量费）。
  • 检索引擎：支持 千亿元数据 规模检索，秒级 返回结果。

3.3 产品优势扫描

• 全生命周期矩阵：支持标准存储、低频存储（最低保留30天）、智能分层（自动转换）、归档存储（支持分钟至小时级取回，最低保留90天）、深度归档（小时级取回，最低保留180天）。
• 极致数据防覆盖与安全合规：
  • 对象锁定（WORM）：通过CA认证，满足美国 SEC 17a-4(f)、FINRA 4511(c) 和 CFTC 1.31(c)-(d) 严格合规要求。
  • 权限管理：已支持 17个 Policy Condition（限制IP、协议、文件类型/大小等）；支持 x-cos-forbid-overwrite 头部及多租户权限隔离、HTTPS/SSE-KMS加密。
• 多维度版权保护机制：支持图文可见明水印；支持不影响观感、有法律效益的盲水印；支持视频数字水印（抗 H.264重转码、降码率/分辨率、音频重采样），实现亿级用户唯一标识溯源。
• 跨模态智能检索 (MetaInsight)：提取 Metadata 和 Embedding 特征构建数据集。支持“以文搜图”、“以图搜图”，可结合智能抠图剔除背景干扰，进行精准定位和群聊竞品二维码拦截。
• 极致去重与成本优化 (SMH)：基于自研 sha256 full hash，支持跨产品、跨租户、跨账号、跨空间的秒传与文件去重；边转边播仅需存储1份原始文件，按播放需求实时触发转码。
• 企业网盘开箱即用：支持企微、LDAP、微软ID等账号同步；员工离职自动冻结/资料转接；文件上传自动杀毒与隔离。

3.4 荣誉背书

• Gartner®：在生成AI云基础设施领域新兴市场象限中，腾讯云智算的“产品性能”与“未来潜力”维度均位列 亚太第一。
• 开源社区高度认可：积极参与主流通信框架建设，获 Deepseek团队 官方致谢，评价其优化贡献带来了 "huge speedup"（极大加速）。

四、 典型案例

1. 客户名称：Deepseek

• 背景：客户进行大语言模型研发，需优化节点间通信与底层网络传输效率。
• 解决方案：采用腾讯网络平台部（Tencent Network Platform Department）贡献的通信框架优化方案（支持多QP的常规内核、以IBGDA替换IBRC）。
• 成效：在包含双端口网卡和RoCE网络的场景中，提升了节点间常规内核的鲁棒性，并显著提升了通信性能（算法带宽/物理带宽逼近极限），实现 "huge speedup"。

2. 客户名称：小红书、彩视、微店

• 背景：电商与生活互联平台，存在海量的图片/音视频上传与分发需求，传统处理方式面临高带宽成本与架构门槛。
• 解决方案：接入数据万象（CI）作为一站式存储与数据处理智能平台，使用图片处理与音视频处理模块。
• 成效：实现一套API开箱即用；服务间调用实现 零外网流量 消耗；处理耗时加快 30%，大幅降低使用成本并提升用户体验。

3. 客户名称：blued、有赞

• 背景：文创及社交电商平台，面临严格的内容合规监管，需处理海量敏感图片、视频及文本。
• 解决方案：采用数据万象（CI）云原生内容安全审核模块（图片/文本/色情/暴恐等查处）。
• 成效：与COS深度集成，实现数据内网一键自动审核及冻结，节省 30% 审核流量成本；VIP专属集群支持高并发弹性扩容，平稳应对敏感日期突发流量。

4. 客户名称：途虎养车、HIKVISION

• 背景：智慧门店与智慧家居及视频监控场景，产生大量难以结构化分析的视频监控数据。
• 解决方案：应用数据万象（CI）内容智能识别与自动化工作流，进行视频标签提取与理解。
• 成效：将无序的监控录像转化为可检索的资产，深挖非结构化视图数据价值。