首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏大话存储

    存储,就选原生存储

    存储产业正在发生颠覆性的变化,主要有两大推手:一个是新一代存储介质SSD;另一个是分布式存储的演进,以SDS(软件定义存储)为代表。 ZettaStor和原生存储 作为原AWS核心架构师、S3、Glacier存储项目团队负责人,陈靓先生非常了解对象存储应对块数据需求的不足。 机缘巧合,2012年,陈靓应南京市政府的感召归国创业,创办了南京鹏云网络科技有限公司,并推出了从最底层开始研发的ZettaStor DBS软件定义分布式存储系统,提出了原生存储的概念。 ZettaStor DBS产品架构图 测试中的“猫腻” 谈到原生存储,陈靓表示:其实概念并不重要。在担任AWS核心架构师期间,其内部很少谈论概念,更多是专注在要解决哪些技术问题。 对于原生存储、非原生存储,测试和验证将是一个非常重要的方法。但是在测试过程中,也应该结合实际,谨防被一些“猫腻”手段所蒙蔽。

    2.2K20发布于 2019-06-10
  • 来自专栏CSDNToQQCode

    原生js cookie本地存储

    document.cookie=name+"="+val+";expires="+new Date(0); } } cookie的特性 cookie自身局限性 条数上的限制,最多20条 大小上的限制,最多4k

    7K30编辑于 2022-11-29
  • 来自专栏AIGC新知

    Meta Llama 4 全面解析:全新的原生多模态 AI

    Llama 4原生多模态,混合专家架构,超长上下文支持。 此外,Llama4系列还整合了文本、图像和视频的统一框架,使其具备原生多模态能力。 它采用了混合专家(MoE)架构,提高了训练和回答用户查询时的效率。 接下来将带你详细了解本次llama4模型的新特性。 技术背景 Llama4 是 Meta 于 今日发布的新一代开源大语言模型系列,标志着其在多模态 AI 领域的重要突破。 原生多模态融合 Llama 4采用了原生多模态设计,能够处理和整合各种类型的数据,包括文本、视频、图像和音频,并且可以在这些格式之间转换内容。 可能解锁AI工程代理(如自动化编码与问题解决),被视为Meta争夺技术制高点的关键。

    2.5K60编辑于 2025-04-07
  • 腾讯云「存储+智能」AI原生基础设施解决方案概要

    主讲人:王致铭 丨 腾讯云 云存储高级产品经理 一、 产品定位与核心亮点 腾讯云「存储+智能」组合是一款专为企业出海及AI应用爆发设计的AI原生存储基础设施。 其核心技术属性在于将传统云原生架构(聚焦Web/APP端的架构复杂度与成本优化)升级为AI原生架构,底层深度融合对象存储(COS)与高性能分布式缓存引擎(GooseFS),并无缝内嵌数据万象(CI)处理引擎 三、 应用框架和功能介绍 3.1 功能框架 产品采用“存储底座 + 处理管理双引擎 + 一站式软件搭建平台”三层架构: 存储底座:对象存储(COS)与 AI存储(GooseFS),负责数据的安全可靠与高性能吞吐 文件支持:最小存储限制 64KB。 兼容性:全兼容 AWS S3 接口。 AI 存储 (GooseFS): 单链接性能:10Gbps(逼近硬件极限)。 文件访问延迟:亚毫秒级(4K小文件延迟从 ~40ms 降至 ~0.4ms,降低100倍)。 存储吞吐带宽:从 15Gbps/PB 提升至 1.8Tbps/PB(提升120倍)。

    11410编辑于 2026-05-30
  • 来自专栏技术杂记

    Mysql 优化存储4

    一般少也能缩减5%的空间,平均在10%左右,我自己经历最明显效果的是减少了32%的空间,对于一个大库来说,能节省不少磁盘空间,并且对查询性能也有一定优化效果

    45120编辑于 2022-03-21
  • 来自专栏监控

    开源云原生存储rook:块存储快速入门实战

    rook-csi-rbd-provisioner   csi.storage.k8s.io/node-stage-secret-name: rook-csi-rbd-node   csi.storage.k8s.io/fstype: ext4              kubernetes.io/rook   1      22h rook-ceph-mon                       kubernetes.io/rook   4                                            CAPACITY   ACCESS MODES   STORAGECLASS      AGE my-pvc   Bound    pvc-76d69972-2a95-44bc-953d-1028b4b69435  POLICY   STATUS   CLAIM            STORAGECLASS      REASON   AGE pvc-76d69972-2a95-44bc-953d-1028b4b69435 存储类指定了用于存储数据的存储类型和属性。删除存储类将确保不再创建新的 Rook 存储卷。 需要注意的是,这4个命令需要按照指定的顺序执行,以确保完全卸载 Rook 块存储

    2.3K00编辑于 2023-04-06
  • AI原生开发范式

    AI原生开发范式的核心概念 AI原生开发范式(AI-Native Development)指以AI为核心构建应用程序的设计方法,其特点包括数据驱动、模型即服务(MaaS)、自动化工作流和持续学习。 与传统开发相比,AI原生应用将机器学习模型作为基础组件,而非附加功能。 典型行业案例分析 金融领域-智能风控系统 某银行采用AI原生架构重构信贷审批流程,实现实时风险评估。 医疗领域-影像辅助诊断 一家医疗科技公司开发AI原生影像分析平台,整合多种医学影像模型(CT、MRI)。 model.predict(input_data) r.setex(key, CACHE_TTL, pickle.dumps(result)) return result 效能评估指标 AI 原生系统需监控多维指标: 模型指标:AUC-ROC、F1 Score、推理延迟 系统指标:QPS、错误率、资源利用率 业务指标:转化率、用户留存、ROI 监控看板应包含实时数据和历史趋势对比,设置自动告警阈值

    33510编辑于 2026-01-20
  • 来自专栏运维笔记

    minio 高性能 Kubernetes 原生对象存储

    minio 高性能 Kubernetes 原生对象存储 minio 高性能 Kubernetes 原生对象存储 特点 安装 单机 分布式 客户端mc安装和使用 minio在K8S的优化实践 MinIO 特点 高性能 minio是世界上最快的对象存储(官网说的: https://min.io/) 弹性扩容 很方便对集群进行弹性扩容 天生的云原生服务 开源免费,最适合企业化定制 比如,你可以使用2个节点,每个节点4块硬盘,也可以使用4个节点,每个节点两块硬盘,诸如此类。 如上图,当我使用4个节点创建分布式minio时,会使用默认的pvc创建存储.默认每个节点创建1个10G的存储(可以自定义修改) 客户端mc安装和使用 安装 wget https://dl.min.io 但这其中有1个最大的问题, 如果你使用的是nfs这种自建共享存储的话,就算minio起了4个节点,能保证数据安全.但是你的nfs磁盘确只有1个,万一的你的nfs宕机,磁盘损坏了,你的数据全都没有了.所以为了保证数据的安全性

    7.3K21发布于 2020-05-12
  • 来自专栏CSDNToQQCode

    原生js本地存储、获取、删除、清空

    meta charset="utf-8"> <title></title> </head> <body> <input type="text"/> <button class="set">存储 </button> <button class="del">清空</button> </body> </html> <script type="text/javascript"> // 吧用户存储在用户的浏览器中

    7.5K20编辑于 2022-11-29
  • 来自专栏大卫李的技术分享

    Rook带你玩转云原生存储

    翻译过来概况下 Rook是一个开源的云原生存储编排系统,提供平台、框架和支持,提供了一套多样化的存储解决方案,可以与云原生环境进行天然集成。 Rook利用云原生容器管理、调度和调度平台提供的设施,将存储软件转化为自我管理、自我扩展和自我修复的存储服务,实现自动化部署、启动、配置、扩容、升级、迁移、灾难恢复、监控和资源管理。 因此,Rook解决的问题是: 快速部署一套云原生存储集群; 平台化管理云原生存储集群,包括存储的扩容、升级、监控、灾难恢复等全生命周期管理; 本身基于云原生容器管理(如Kubernetes),管理方便。 以前苦于没有部署云原生存储系统,一直没法实践这些特性,这次得益于Rook的便捷性,赶紧来尝鲜下。 更深入地观察存储挂载机制 通过上面两个测试场景,我们来看下背后的云原生存储的运行逻辑: 进入pod观察存储挂载情况 对比两个测试场景pod实例里面存储挂载情况: # use ceph as rbd storage

    4.5K31发布于 2020-05-11
  • 来自专栏thinkphp+vue

    原生存储详解:容器存储与 K8s 存储

    作者 | 阚俊宝 阿里云技术专家 导读:云原生存储详解系列文章将从云原生存储服务的概念、特点、需求、原理、使用及案例等方面,和大家一起探讨云原生存储技术新的机遇与挑战。 相关文章推荐: 云原生存储详解:云原生应用的基石 云原生存储详解:容器存储与 K8s 存储卷 云原生存储的两个关键领域:Docker 存储卷、K8s 存储卷; Docker 存储卷:容器服务在单节点的存储组织形式 镜像存储层说明如下: 该节点上共包含 6 个镜像层:Layer 1~6。 镜像 1 由:Layer 1、3、4、5 组成; 镜像 2 由:Layer 2、3、5、6 组成。 4)数据卷的挂载传播 Docker volume 支持挂载传播的配置:Propagation。 4)延迟绑定动态数据卷 某种存储(阿里云云盘)在挂载属性上有所限制,只能将相同可用区的数据卷和 Node 节点进行挂载,不在同一个可用区不可以挂载。

    2.4K41发布于 2021-05-18
  • 来自专栏Linux成长之路

    原生之Docker容器的存储管理

    ", "ResolvConfPath": "/var/lib/docker/containers/05d35ba971ad78179a7ab7a93dfb4c59faeb5872152f03a897144f4e5040b7ee /hosts", "LogPath": "/var/lib/docker/containers/05d35ba971ad78179a7ab7a93dfb4c59faeb5872152f03a897144f4e5040b7ee /05d35ba971ad78179a7ab7a93dfb4c59faeb5872152f03a897144f4e5040b7ee-json.log", "Name": "/web01", NetworkSettings": { "Bridge": "", "SandboxID": "99696b43e61670fc9f98c0d84d6da281fe4db3ec52dc5210895014dbe4ca69a4 test04容器[root@docker htdocs]# docker run --name test04 -td -p 86:80 --volumes-from test03 busyboxcfde4db1ff755695a7b2f4c10e863c9fdf8e9a0f7f4a132d2fdd2fb0e4c497f82

    1.1K71编辑于 2023-01-21
  • 来自专栏科技云报道

    原生时代,存储长什么样?

    但值得注意的是,据CNCF调查显示,目前存储系统依然是云原生场景使用和部署中面临的最主要障碍之一。 云原生环境对存储 带来新挑战 存储系统一直以来都是基础设施软件中的核心之一。 云原生存储作为一种存储系统,可靠性、性能、高可用等特点都是必不可少的。除此之外,云原生环境对存储系统提出了更高的要求。 面对诸多挑战云原生存储应具备哪些特点呢? 云原生生态 云原生存储还需要能够很好地和其他云原生基础设施配合,例如云原生数据库,使得云原生数据库可以真正的在公有云和私有云都能够得到一致的用户体验。 市场上的云原生存储方案 为了更好的理解在云环境中如何构建云原生存储,先看几个在Kubernetes企业环境中部署主流的云原生存储方案。 事实上,云原生存储遇到的性能、弹性、高可用、加密、隔离、可观测性、生命周期等方面的问题,不但需要存储产品层次的改进,更需要在云原生的控制/数据平面的改进,以推进云原生存储的演进,而这正是新老存储厂商有待优化和提供的服务空间

    91620编辑于 2022-04-16
  • 来自专栏阿泽的学习笔记

    原生AI漫谈

    和持久化走 cloud DB…… 云原生时代的系统开发 对于系统开发人员来说(比如云数据库,云 AI 平台),云原生的趋势也会产生相应的影响。 但是到了云原生时代,我们可以完全打破这个固有框架,我们拥有的计算,存储都可以理解为是“无限”的,只要有钱就可以! 具体的例子比如我们可以通过用户的数据查询看到经常使用的过滤维度,来重新安排数据的排序和分区,这样在同样的数据量情况下,系统可以花更少的计算资源来完成查询,增加系统的利润 :) 云原生+AI 最后再来看下跟 AI 相关的部分。 而前面讲的“云原生语言”,则更关注在程序具体执行层面的关注点分离。 把两者结合起来看,云原生时代的 AI 平台开发会是一片巨大的未开垦之地,对于云和算法各自都有很宽很长的路可以走。

    1K30发布于 2021-07-06
  • 如何构建AI原生应用?从大模型到知识中台,从数据到规则逻辑。AI原生=模型原生+知识原生+价值原生

    今天继续聊AI和大模型方面的话题。即什么是AI原生,如何构建一个真正意义上的AI原生系统? 对于这个问题,我们先看下AI大模型自己给出的答案。 AI原生-大模型原生+知识原生+价值原生 一个系统能够称之为叫AI原生系统呢?这里面核心的一个关键就是整个系统核心的能力是架构在底层的AI大模型和底层的知识层上面的。 你如果满足这么一个条件,那你们做一个系统就可以叫做AI原生系统。 我原来谈AI原生的时候谈到过,AI原生核心是知识原生,为何你当前企业有数据库数据,有资料文档,不能快速的构建AI原生应用? 这里的大模型指的是具有强大计算能力和丰富数据训练的AI算法,如GPT-4、百度的文心一言等,它们构成了应用的核心驱动力。大模型不仅仅是完成特定任务的工具,更是AI原生应用创新的基石。 注意这个说法只解决了AI原生应用的大模型原生问题,并没有解决知识原生的问题。如果按这个说法所有的AI智能体应用都是AI原生应用,但是我的理解,AI原生应用的核心重点应该是在知识原生上面。

    79920编辑于 2025-11-17
  • 来自专栏PostgreSQL研究与原理解析

    OrioleDB – 构建现代云原生存储引擎

    OrioleDB – 构建现代云原生存储引擎 OrioleDB是PG的一个新存储引擎,为世界上最受欢迎的数据库平台带来一种现代化数据库容量、功能和性能方法。 通过扩展和增强当前的表访问方法,OrioleDB为未来更强大的存储模型打开了大门,这些模型对云和现代硬件架构进行了优化。目前是标准的PG许可。 1)专为现代硬件而设计。 OrioleDB的设计针对数十个和上百CPU内核现代服务器,避免CPU瓶颈,提供了针对现代存储技术,例如SSD和NVM,的使用方法。 2)减少维护需求。 旧版本的元组不会导致主存储系统膨胀,而是将其放逐到undo链的undo日志中。页级别的undo记录允许系统很方便地尽快回收已删除元组占用的空间。 4)使用及架构参考: https://github.com/orioledb/orioledb/blob/main/doc/usage.md https://github.com/orioledb/orioledb

    1K20编辑于 2022-03-29
  • 来自专栏IT创事记

    拥抱云原生,如何选择最佳容器存储

    为什么容器技术如此火热 云原生时代,容器凭借其易移植、云上云下自由运行、自由迁移的特点,得到了众多企业的青睐。 ,导致影响容器应用的性能和效率; 3、管理运维难:存储的管理和运维过于复杂,需要和存储部门紧密配合才能完成业务的上线和运维工作,存储发放效率不足,批量升级场景耗时高,运维人员负担重; 4、灾备方案缺乏: 对性能要求高的应用:很多新兴应用,如AI训练,其典型数据结构是海量非结构化数据的随机读写,文件大小通常在数KB到数MB,数量可达百亿,计算资源规模从几十台到上千台不等。 SAN存储上的数据无法在上千台计算集群中共享,因此不是容器存储的最佳选择。 例如,某大型商业银行使用Ceph+服务器本地盘构建的分布式存储系统,在AI场景实测性能只有2万OPS,而采用华为OceanStor Dorado全闪存NAS存储后,双控性能轻松达成40万OPS,AI分析效率提升

    1.1K30编辑于 2023-02-17
  • AI原生组织(AI-Native Organization)

    "业务先行、AI补丁",原生是"AI即底座"。 ||文档存储|Notion||AI辅助|自家产品、提示词工程||品牌创作|Midjourney、Krea.ai、Civitai|####核心洞察>"AI工具在编码方面远远不够好,但它可以帮助我们从产品发布到 应用榜排名|**第4名**|----###3.3华为、联想、飞书:传统企业的AI原生转型|企业|实践方向||:-:|:-:||**华为**|将AI融入数据全生命周期,智能分析成为数据平台默认能力||** 工具,无组织规划|大多数传统企业起点||**L2**|局部应用|AI嵌入特定业务环节,效率提升|部分AI工具使用||**L3**|规模推广|跨部门AI应用,组织协调增强|AI应用增多但割裂||**L4* (2026年4月)FT中文网/林薇:《AI原生:硅谷正在定义的新企业范式》(2025年11月)少数派:《Perplexity团队深度解析》(2025年10月)极客书房:《Perplexity如何构建AI

    58310编辑于 2026-05-18
  • 来自专栏微言码道

    走马观花云原生技术(4):强一致性分布式存储etcd

    一) etcd有两个最重要的特点,其一它是分布式存储,其二是强一致性。而这两个特性对于云原生架构来说,极为重要。这也是K8S选择etcd做为它的首要存储的原因。 分布式存储的另一个重要表现是分布式存储中任何少数节点的失败,不会影响所有数据的完整性。 对于以K8S为核心的云原生架构来说,分布式就是它的本质,那K8S本身需要一个分布式存储也是非常有必要的。 K8S需要的是一个分布式存储 做为云原生的最重要的容器编排与管理平台,K8S天然就是分布式的,自然其存储也需要的是一个分布式的。 试想一下,在一个分布式管理平台中,关键的信息存储是中心式的,这种搭配肯定不协调。 而Etcd这样的分布式存储,正好适应了K8S这样的云原生架构容器编排平台。 存储变更事件通知 Etcd有一个很重要的能力,就是在可以监听存储变更事件。这个非常适合K8S这样的云原生平台的功能扩展。

    1.5K30编辑于 2022-11-18
  • 来自专栏智能时刻

    存储】2022 年的 4 个开源对象存储平台

    介绍 在处理大量非结构化数据时,我们需要一个地方来存储它。我们选择存储数据的方式有很多种,但今天我们要关注的一种是对象存储或基于对象的存储。 他们还有一些软件库,使用 Java、C、C++、Python、PHP 和其他几个编写的软件能够使用原生 API 的强大功能访问 Ceph 的对象存储系统。 3. 4.OpenIO OpenIO 是一种开源对象存储解决方案,用于管理和保护大量非结构化数据。它允许您构建和操作具有弹性且安全的大规模存储基础架构。 一致的 Ozone是一种高度一致的物体存储。这种一致性是通过使用RAFT等协议实现的。 云原生 Ozone被设计成在像纱线和库伯内特斯这样的集装箱环境中很好地工作。 本文 https://jiagoushi.pro/4-open-source-object-storage-platforms-2021 讨论:知识星球【首席架构师圈】或者加微信小号【cea_csa_cto

    13.4K10编辑于 2022-03-08
领券