- 综合排序
- 最热优先
- 最新优先
- 来自专栏存储知识
容器时代的存储底座：存储资源盘活系统SRRS
集群的生产级操作需要许多组件 ，用户通常没有足够的技术能力；问题之二，是尽管 Kubernetes可以在多种类型的基础架构上运行，但多架构同时存在导致云原生平台的底层基础设施（即支持 Kubernetes 集群的计算、存储和网络资源 存储资源盘活系统（Storage Resource Reutilization System, SRRS）。SRRS 可以在存储层面解决上述问题。 SRRS 是一款纯用户态的绿色软件，只有150MB左右的安装包，不需要ROOT权限就可以安装在任何Linux操作系统上，不独占硬盘、操作系统，以2GB内存把各服务器中分散的磁盘整合成高性能的存储资源池， 通过分布式双控制器架构保证了低延迟、高可用、易拓展；支持x86、ARM、龙芯等异构、非对称服务器混合部署，通过功能全面完善的控制台、命令行与API来统一调度管理所有存储设备；通过强大的兼容性和硬件异构性充分利用全部存储资源 SRRS 与 Kubernetes一样，可在多种类型的基础设施上运行，向上提供标准的 iSCSI 接口，完全适配 Kubernetes 的 容器存储接口 CSI 。
1.3K20编辑于 2023-01-17 - 来自专栏存储知识
存储资源盘活系统构建AI时代的存储底座
ChatGPT在发布5天内吸引了100w用户，用户获取速度超过了任何一家科技产品。人们一直梦想着计算机能更多地参与到生产活动中来，如翻译文字、识别语言、检索、生成文字图片等。 2022年末，生成式对话型人工智能ChatGPT和AI生成图片应用Midjourney问世，1个月内获取过亿用户。尽管根据用户使用后的的反馈，它们的表现还不能堪称完美，但已经是令大众惊喜的程度了。 ChatGPT和Midjourney背后的公司是OpenAI，成立于2015年，由Elon Musk和Sam Altman等个人和组织创建，旨在推进和促进人工智能领域的研究。 其次，是作为训练输出结果的参数模型：考虑到过去5年中模型参数呈指数增长，下一代大语言模型很可能是万亿参数模型，快速增长的模型需要足够的空间来存储。 这么多存储空间从哪来？ 在AI的时代来临之前，存储资源盘活系统可以为其构建坚固、灵活的存储底座。
1.1K20编辑于 2023-02-23 - 来自专栏IT创事记
创新数据底座：智能制造的“圣杯”
既有的数据基础设施很难满足以汽车研发为代表的新增需求，创新的数据底座成为智能制造时代被寄予厚望的“圣杯”。 仿真平台只是创新数据底座的冰山一角。 与欧美发达国家相比，我国智能制造还有相当大的发展空间。当前90%的制造业企业配有自动生产线，但仅有40%实现数字化管理，5%打通工厂数据，1%使用智能化技术。 走出智能制造的深水区、实现向制造业强国的跃迁，需要更多行业领头羊率先垂范。华为构建的创新数据基础设施，将成为国内制造企业数字化转型坚实的数据底座，其示范效应影响深远。 存储产品的高歌猛进，为华为创新数据基础设施提供了充足的底气；与更多懂行业、懂业务、懂技术的合作伙伴携手同行，则是华为构建制造业等行业数据底座的生态保障。
54420编辑于 2022-08-30 - 来自专栏数据猿
AI存储进入PBEB时代，HDD为何成为数据底座？
“西部数据的策略：从11碟HDD出发，重塑AI存储底座。 大数据产业创新服务媒体 ——聚焦数据 · 改变商业 让我们来试想这样一个场景：凌晨3点，某大模型云服务平台的日志系统依然在高速写入。 2025年，大模型和智能体进入商用部署的新阶段，“一企一模型”“一行一垂类”的趋势拉开，随之而来的，是以PB乃至EB为单位的数据暴涨。 西部数据的策略： 从11碟HDD出发，重塑AI存储底座 编者认为，AI时代对HDD提出了两个新要求：更大的容量，更长的周期。这不仅仅是一次性的性能突破，更是一次关于“长期信赖”关系的重构。 这是对客户的长期关系战略——构建“存储信赖路径”，帮助客户把其数据底座变成护城河。 每一个多模态模型的推理调用、每一个Agent系统的上下文记录，每一次大语言模型的“记忆保存”，都是对存储底座的“微小索取”。
25510编辑于 2026-01-27 智能驾驶时代：车联网需要怎样的智能网络底座？
2024年，智能驾驶市场火热，无论是造车新势力还是老牌车企纷纷发力智能驾驶，他们深知，新能源汽车的下半场已到，再不发力智能驾驶，可能真的有些来不及了。 车企不断加码单车智能的同时，政府也在稳步的推进车路协同。智能驾驶领域一直处在新技术广泛应用和验证的前沿，让我们一起探索智能驾驶的发展将给我们带来哪些启示。 2024年年初，工业和信息化部、公安部等5部门印发《关于开展智能网联汽车“车路云一体化”应用试点工作的通知》，提出智能网联汽车“车路云一体化”协同发展的系列政策举措。 03多技术融合未来的网络体系将整合多种通信技术（如5G、Internet、MPLS、MSTP等），实现无缝互操作。这种融合能够在不同应用场景下选择最优的通信方式，提高网络的灵活性和适应性。 1、网络接入侧融合MSTP、MPLS、4G/5G等多类型线路，支持灵活的网络接入方式，一网实现不同业务场景下的网络需求，2、通过一个集中的平台，实现了对全局网络资源的可视化监控和管理，提供了一致性编排能力
64310编辑于 2024-06-12- 来自专栏深度学习与python
打造无限扩展的云存储系统，元数据存储底座的设计和实践
而且鉴于这是百度智能云存储的核心底座，需要自主可控并提供给最佳的用户体验。最终我们决定面向百度沧海·存储的元数据场景，自主研发一套类 Spanner 架构的分布式事务数据库作为元数据底座。 5 百度智能云的云存储元数据底座 TafDB TafDB 是面向元数据场景设计的一个分布式数据库系统。 作者简介 曹彪 百度智能云云存储高级架构师、云存储元数据底座技术负责人 2014 年加入百度后一直从事基础架构领域研发，先后负责了百度小批量实时计算平台以及百度智能云元数据存储平台，带领团队从 0 到 1 打造了百度智能云云存储的元数据底座 TafDB，并在对象存储、文件系统大规模上线，现任百度智能云云存储部高级架构师、元数据底座 TafDB 技术负责人。 阴智辉 百度智能云高级研发工程师 TafDB 核心研发 2019 年华中科技大学硕士毕业后加入百度智能云云存储部，至今一直致力于建设云存储元数据底座 TafDB。
1.8K20编辑于 2023-03-29 - 来自专栏全栈程序员必看
HTML 5 Web 存储
大家好，又见面了，我是全栈君 HTML5 提供了两种在客户端存储数据的新方法： localStorage – 没有时间限制的数据存储 sessionStorage – 针对一个 session 的数据存储 html5 web storage的浏览器支持判断 要判断浏览器是否支持localStorage可以使用下面的代码： if(window.localStorage){ alert(“浏览支持localStorage localStorage和sessionStorage都具有相同的操作方法，例如setItem、getItem和removeItem等 localStorage和sessionStorage的方法 setItem存储 value http://hovertree.com/menu/html5/ 用途：将value存储到key字段 用法：.setItem( key, value) 代码示例：sessionStorage.setItem (“key”, “value”); localStorage.setItem(“site”, “xiao”); getItem获取value 用途：获取指定key本地存储的值 用法：.getItem
70510编辑于 2022-07-15 - 来自专栏我在本科期间写的文章
5 存储器
5 存储器 存储器类型 随机访问存储器 (RAM): 特点: 可读、可写，断电时数据会丢失。 存储器容量计算 公式: \text{存储器容量} = 2^{\text{地址数}}\times\text{存储单元的位数} 存储单元的"字长"等同于I/O数据线的位数。 每个地址的存储字长为8位，即1 Byte。所以总存储容量为 65536 \times 1B = 65536B = 64KB 。 存储器扩展方法 位扩展：增加I/O数以扩展存储字长。 字扩展：增加存储字的数量，通常通过片选信号进行地址选择，扩展地址范围。 例: 使用多个2K×8的存储器扩展为8K×8的系统。 分析: 需要使用4片2K×8的存储器。 例如，如果CPU地址总线为16位，存储芯片容量为8KB，使用全译码可以寻址到64KB的存储器。 部分译码法: 只对部分高位地址进行译码，生成片选信号。
95410编辑于 2024-09-23 - 来自专栏数栈技术分享
袋鼠云数据湖平台「DataLake」，存储全量数据，打造数字底座
面对海量数据的存储以及结构化数据、文本、二进制（图片、音频、视频）等数据的存储应用，传统架构的离线数据仓库越来越 “力不从心”。 根据维基的定义，数据湖是一个以原始格式 (通常是对象块或文件) 存储数的系统或存储库。数据湖通常是所有企业数据的单一存储，用于报告、可视化、高级分析和机器学习等任务。 5. 事务支持支持所有 ACID 语义，T+0 数据更新。 异构数据源数据通过 ChunJun 同步到数据湖平台，历史数据存储 Iceberg 湖内，可以提供更高效的查询同时具备廉价存储。 多种底层存储湖仓平台支持 HDFS、S3、OSS、MInio 等多种底层存储，灵活满足客户不同数据存储需求。
1.8K21编辑于 2022-11-25 - 来自专栏深度学习与python
贝壳找房: 为 AI 平台打造混合多云的存储加速底座
目前 JuiceFS 作为存储底座服务于整个机器学习平台，不仅提高了对混合多云架构的适应性，还大幅提升了数据处理效率。 我们目前每周的数据增长量已占到总文件数的十分之一，即每周新增近 5 亿个小文件。预计这种趋势将在今年持续，给我们的存储系统带来严峻挑战。 JuiceFS 依托于公有云对象存储，不仅成本低廉，还能提供几乎无限的存储容量，最大限度地发挥云存储的优势；其性能主要依赖于对象存储和元数据引擎。 03 基于 JuiceFS 的存储底座设计 元数据引擎架构设计 JuiceFS 采用的是元数据和数据分离的架构。对于元数据引擎的选型，我们考虑了三个方案。 发布颠覆性个人智能系统Apple Intelligence，并彻底改革Siri AI “奸商”的崛起
67210编辑于 2024-06-17 - 来自专栏个人编程笔记
H5-web存储
浏览量 1 首先我们来思考几个问题： 1.什么是web存储？ 2.h5引入web存储的原因？ 3.web存储的方式有哪些？ 使用html5在本地存储用户的浏览数据，之前采用的cookie的形式，但是cookie存储的数据量少而且效率底，进而引入了web存储，客户端存储数据的方式有两种：localStorage，永久性存储，除非自己删除 />"+localStorage.key(2); }else{ document.getElementById("result").innerHTML="对不起，您的浏览器不支持 web 存储 sessionStorage 关于sessionStorage和localStorage使用api是相同的，只不过它是临时存储，关闭浏览器就会自动清除。 计数的例子： <!
41710编辑于 2023-03-03 - 来自专栏乱码李
HTML5 前端存储
html5 中的 Web Storage 包括了两种存储方式：sessionStorage和localStorage。 因此 sessionStorage 不是一种持久化的本地存储，仅仅是会话级别的存储。 而 localStorage 用于持久化的本地存储，除非主动删除数据，否则数据是永远不会过期的。 Firefox (Gecko) Internet Explorer Opera Safari (WebKit) localStorage 4 3.5 8 10.50 4 sessionStorage 5 localStorage 主要存储一些比较多的本地数据，如 HTML5 小游戏里面生成的数据。 因为只要打开控制台，你就随意修改它们的值，所以千万不要用它们存储你系统中的敏感数据。
99510发布于 2021-11-26 HTML5 Web 存储
HTML5 web 存储，一个比 cookie 更好的本地存储方式。 什么是 HTML5 Web 存储? 使用HTML5可以在本地存储用户的浏览数据。 早些时候,本地存储使用的是 cookie。 但是Web 存储需要更加的安全与快速. 这些数据不会被保存在服务器上，但是这些数据只用于用户请求网站数据上.它也可以存储大量的数据，而不影响网站的性能. 注意: Internet Explorer 7 及更早IE版本不支持web 存储. localStorage 和 sessionStorage 客户端存储数据的两个对象为： localStorage 不支持 web 存储。 } localStorage 对象 localStorage 对象存储的数据没有时间限制。第二天、第二周或下一年之后，数据依然可用。 ，更多情况下我们存储的数据会更复杂。
25810编辑于 2025-12-16- 来自专栏图灵人工智能
对比欧盟，中国的《人工智能法案》应有什么底座？
该法案的建议是通过引进监管沙盒机制来实现，即：在人工智能系统入市或投入使用前，对人工智能系统进行开发、测试和验证以降低风险。 为了给人工智能立法，国外学术界先后出现了蒙特利尔宣言、多伦多宣言等多个人工智能宣言，欧盟《人工智能法案》正是在这些宣言的基础上发展而来。而因为国情的差异，中国当然不可能“在别家的地基上盖自家的房子”。 ”、跟上人工智能狂飙的发展迭代速度（让我们来设想一下，欧盟基于学术界的宣言于2年前提出《人工智能法案》草案，预计将在今年年底获得最终批准，但还要等到2026年才可能正式生效，整个周期至少长达5年之久，而在此期间如果真遇上 在这轮全球人工智能治理的热潮中，中国（包括北京等城市）应该加紧颁布具有自身文化属性和特色的《人工智能法案》，但请一定不要忘记，“理性、开放、和谐、人文”才应该是这部“以人为本”的法案最坚实的底座，这才是体现人类文明面对强机器智能的挑战仍然可以长盛不衰的根本力量所在 在人工智能学术圈和产业界有20多年的资深从业经历，曾获“科学中国人年度人物”称号、中国发明创业成果奖（一等奖，中国发明协会颁发）、吴文俊人工智能科技进步奖（中国智能科学技术最高奖，中国人工智能学会颁发）
51620编辑于 2023-10-24 - 来自专栏云计算行业
智能分层存储,自动优化您的存储成本
但如果选择智能分层存储，就无需关注数据访问热度，由对象存储服务来监测数据访问频率，即可将数据智能地在冷热访问层之间转换，且无需数据取回费用，在不损害户访问体验的同时，有效降低存储成本。 智能分层存储优势 无需关注数据访问模式，智能转换存储层 只需为数据指定对象存储类型，即可应用智能分层存储特性。 低频数据无需取回，秒变高频数据 智能分层存储是文件对象级别的存储类型，COS会智能监控每一个处于该存储类型的对象，当检测到某对象的访问热度降低时，会自动将数据转换至低频存储，如果该对象若干时间后重新被人访问 数据自动沉降，存储成本更优 通过监测数据访问频率，自动化管理数据访问层，智能分层存储类型还参与对象存储生命周期流程，用户可以按需将智能分层存储沉降到归档存储中，进一步降低数据在云端的存储成本。 同城容灾MAZ架构已同步智能分层存储类型，数据设计可靠性可达12个9，业务设计可用性可达99.995%。 通过数据冷热分层存储，智能分层能够帮助用户在存储成本和读写性能之间寻找平衡点。
73420编辑于 2023-05-29 - 来自专栏IT创事记
智能时代，高端存储何去何从？
在系列连载《智能时代下的高端存储》首期文章里，回顾了高端存储自诞生以来风起云涌的三十年里脱颖而出的各大厂商的发展。 而在日新月异的当下，涌出了很多质疑声：智能时代，是否还有高端存储的概念？对这个问题，高端存储有自己的“追求”和“坚持”。 从过去两年里主流高端存储厂商密集发布的新品特性中就能看见端倪： 2018年5月，DELL EMC发布了基于端到端的NVMe和内置的实时机器学习引擎架构的PowerMAX；2019年7月，华为发布了新一代 关于“智能时代，是否还有高端存储的概念”这一疑问，从不同角度出发得到的答案不尽相同。究其原因则主要在于随着5G、云计算、人工智能和第四次工业革命的深入发展，产业环境和IT技术均已今非昔比。 当前主流的厂家基本都具备更高的缓存和容量，多控制器必然多内存，这些都是高端存储必备要素。 5.大量的多核处理器 高端存储的多控架构提供更高的可用性和性能。
96120编辑于 2022-08-30 - 来自专栏Apache Doris
Apache Doris 4.1：面向 AI & Search 的统一数据存储与检索底座
AI 时代，数据库已成为智能 Agent、RAG 系统、大模型应用和 AI 可观测平台 的基础设施。它不仅要能存结构化数据，更要能承载长上下文、向量、全文、Trace、事件流等新型数据。 聚合扩展优化：先缩数据，再做多维聚合 通过智能识别最细粒度聚合组及其聚合率，在满足条件时，将执行方式从“多组并行聚合”调整为：先完成最细粒度聚合，大幅缩减数据规模，再基于结果计算其他聚合组，从而显著降低计算延迟 超过 1/5 的测试用例改进幅度超过 20%，最大改进幅度为 160%，最大回退低于 5%。 3. 嵌套列裁剪：只读需要的数据 嵌套列裁剪可精确解析嵌套字段结构。 对象存储成本优化：在高频导入场景下，通过节点级请求合并，减少对象存储请求次数及小文件数量，整体成本最高可降低 90%。 参考文档： https://doris.apache.org/zh-CN/docs/4.x/lakehouse/catalogs/iceberg-catalog#%E5%88%9B%E5%BB%BA%E5%
62410编辑于 2026-04-24 - 来自专栏Python爬虫逆向教程
Python爬虫之文件存储#5
爬虫专栏：http://t.csdnimg.cn/WfCSx 文件存储形式多种多样，比如可以保存成 TXT 纯文本形式，也可以保存为 JSON 格式、CSV 格式等，本节就来了解一下文本文件的存储方式。 TXT 文本存储 将数据保存到 TXT 文本的操作非常简单，而且 TXT 文本几乎兼容任何平台，但是这有个缺点，那就是不利于检索。 所以如果对检索和数据结构要求不高，追求方便第一的话，可以采用 TXT 文本存储。本节中，我们就来看下如何利用 Python 保存 TXT 文本文件。 1. 运行结果如下： json.decoder.JSONDecodeError: Expecting property name enclosed in double quotes: line 3 column 5 CSV 文件存储 CSV，全称为 Comma-Separated Values，中文可以叫作逗号分隔值或字符分隔值，其文件以纯文本形式存储表格数据。
1.8K10编辑于 2024-02-10 - 来自专栏前端开发随记
HTML5离线存储原理
前言 使用HTML5，通过创建cache manifest文件，可轻松创建web应用的离线版本；HTML5引入了应用程序缓存，这意味着web应用可进行缓存，并可在没有网络时进行访问。 应用程序缓存为应用带来三个优势 离线浏览—用户可在离线时使用 速度—已经缓存的资源加载的更快 减少服务器负载—浏览器将只从服务器下载更改过的资源 原理和环境 如上面提到的HTML5的离线存储是基于一个新建的 .appcache文件的，通过这个文件上的解析清单离线存储资源，这些资源就会像cookie一样被存储了下来。 之后当网络在处于离线状态下时，浏览器会通过被离线存储的数据进行页面展示。 就像cookie一样，html5的离线存储也需要服务器环境。 目录中的所有文件： ALLBACK：/html5/ /404.html 第一个 URI 是资源，第二个是替补。
3.9K50编辑于 2022-12-15 - 来自专栏White feathe 的博客
H5 localstorage存储文件
H5 localstorage存储文件 利用localStorage储存js文件，只有在第一次访问该页面的时候加载js文件，以后在访问的时候加载本地localStorage执行 操作步骤： 1. 页面引用存储 3. xmlhttp = new XMLHttpRequest(); } else { // code for IE6, IE5 "version.html">点我试试 </body> <script src="js/config.js"></script> <script> //存储 console.log("2") }, true); console.log($("a").html()) </script> </html> 另一个页面使用存储的
1K30编辑于 2021-12-08
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号