- 综合排序
- 最热优先
- 最新优先
- 来自专栏侯哥的Python分享
Mysql高级7-存储过程
一、介绍 存储过程是事先经过编译并存储在数据库中的一段sql语句的集合，调用存储过程可以简化应用开发人员的很多工作，减少数据在数据库和应用服务器之间的传输，对于提高数据处理的效率是有好处的。 二、存储过程的特点 封装、复用 可以接收参数，也可以返回数据 减少网络交互，效率提升 三、存储过程语法 3.1 创建语法 create procedure 存储过程名称 ([参数列表]) begin when month >= 4 and month <= 6 then -> set result := "第二季度"; -> when month >=7 sql逻辑.... end while; 案例：计算从1累加到n的值，n为传入的参数值 mysql> delimiter & mysql> mysql> create procedure p7( -> end; -> & Query OK, 0 rows affected (1.56 sec) mysql> delimiter ; mysql> mysql> call p7(
1.2K81编辑于 2023-08-15 - 来自专栏大数据和云计算技术
MongoDB系列7：MongoDB存储引擎
1、前言 存储引擎是数据库的组成部分，负责管理数据存储。 MongoDB支持的以下存储引擎： 存储引擎描述WiredTiger存储引擎从MongoDB 3.2开始默认的存储引擎，新的版本MongoDB推荐使用WiredTiger存储引擎。 MMAPv1存储引擎MMAPv1是MongoDB 3.2之前版本默认的存储引擎。In-Memory存储引擎MongoDB企业版支持In-Memory存储引擎。 表 2、WiredTiger存储引擎 从MongoDB 3.2开始，MongoDB默认的存储引擎为WiredTiger存储引擎。 4、MMAPv1存储引擎 MMAPv1存储引擎是3.2版本之前的默认存储引擎。它利用集合级并发性和内存映射文件访问底层数据存储。内存管理委托给操作系统。
2.9K60发布于 2018-03-30 - 来自专栏Mr.Wang
CentOS7挂载NAS共享存储
记一次在centos7下挂载惠普nas存储的操作，这台惠普nas存储的访问协议有两种：CIFS和NFS，本次采用nfs协议 环境介绍： NSA存储：HP Store Once 3540 采用协议：NFS 磁盘容量：500G 挂载路径：10.1.1.133:/nas/nfs-ts 操作系统：centos7 1.在nas上创建共享存储 2.在操作系统上安装依赖包 [root@localhost]$ yum 8.x86_64 samba-common-libs-4.10.4-11.el7_8.x86_64 samba-common-tools-4.10.4-11.el7_8.x86_64 samba-client -4.10.4-11.el7_8.x86_64 samba-common-4.10.4-11.el7_8.noarch samba-libs-4.10.4-11.el7_8.x86_64 samba-4.10.4 -11.el7_8.x86_64 [root@localhost]$ rpm -qa nfs-utils nfs-utils-1.3.0-0.66.el7.x86_64 3.创建一个挂载目录 mkdir
7.9K30编辑于 2023-03-13 - 来自专栏Java知识点
第7章_InnoDB数据存储结构
数据库的存储结构：页 # 1.1 磁盘与内存交互基本单位：页 # 1.2 页结构概述 # 1.3 页的大小 不同的数据库管理系统（简称 DBMS）的页大小不同。 页结构的示意图如下所示： 如下表所示： 我们可以把这 7 个结构分为 3 个部分。 数据库存储结构.mmap # 2.3 从数据库页的角度看 B + 树如何查询 一颗 B + 树按照字节类型可以分为两部分： 叶子节点，B+ 树最底层的节点，节点的高度为 0，存储行记录。 非叶子节点，节点的高度大于 0，存储索引键和页面指针，并不存储行记录本身。 当我们从页结构来理解 B+ 树的结构的时候，可以帮我们理解一些通过索引进行检索的原理： # 3. InnoDB 行格式 (或记录格式) 见文件 InnoDB 数据库存储结构.mmap # 4. 区、段与碎片区 # 4.1 为什么要有区？ # 4.2 为什么要有段？
39820编辑于 2023-08-02 - 来自专栏互联网-小阿宇
Centos7挂载ISCSI网络存储
博客首页：互联网-小啊宇 Centos7挂载ISCSI网络存储 ⭐ISCSI简介 ⭐服务器安装依赖 ⭐ISCSI启动并设置开机自启动 ⭐查看Target ⭐登陆节点前需验证 开启验证 添加用户 添加密码 从根本上说，它是一种基于IP Storage理论的新型存储技术，该技术将存储行业广泛应用的SCSI接口技术与IP网络技术相结合，可以在IP网络上构建SAN。 简单地说，iSCSI就是在IP网络上运行SCSI协议的一种网络存储技术。iSCSI技术最初由Cisco和IBM两家开发，并且得到了广大IP存储技术爱好者的大力支持，这几年得到迅速的发展壮大。 对于中小企业的存储网络来说，iSCSI是个非常好的选择。 其次，iSCSI技术解决了传输效率、存储容量、兼容性、开放性、安全性等方面的诸多问题，在使用性能上绝对不输给商业的存储系统或光纤存储网络。
2.3K30编辑于 2022-11-21 - 来自专栏皮振伟的专栏
漫谈AI推理与存储
AI存储核心需求 模型权重 LLM模型权重是AI推理最基础的持久化存储数据，核心特征为一次写入、多次读取。 即token0~3对应hash0-value0、token4~7对应hash1-value1，以此类推。 基于GD2FS的AI推理架构 基于GD2FS构建的LLM推理协同架构，核心是重塑端到端的AI推理链路，打破传统推理引擎、存储、调度系统的割裂状态。 AI推理是典型的系统性工程，性能优化不能局限于单一模块，需实现存储、推理、调度的全局协同。 、缓存吞吐、存储成本、资源调度等核心痛点，为超长上下文、高并发、大规模AI推理场景提供底层支撑。
10710编辑于 2026-06-05 - 来自专栏AI
AI中的数据存储
: GB级别的顺序写 推理和RAG过程中: TB级别的随机读 归档过程中: PB级别的随机写 典型 AI 集群的存储剖析(按存储性能分层存储) 图片 左边绿色GPU服务器集群通常只能提供8个U.2的插槽 中间采用高性能全闪存,通过是TLC, 弥补机械盘性能, 总容量比HDD少 右边采用对象存储, 存储集群或JBODS, 包含大量机械盘, 总容量占比高 AI集群中的数据移动 图片 1.数据采集阶段，原始数据按顺序写入对象存储层 RAG 还可以创建额外的 I/O 活动 5.归档流程: 模型输入和输出被捕获并写入对象存储层的磁盘 旨在优化 AI 存储效率的产品组合 QLC 提升新型 AI DC(数据中心) 构建的电源效率 每个 DGX 有关建模详细信息，请参阅附录“QLC 功率效率与 HDD” 模型训练与数据存储 AI 数据穿越存储层之旅 最近的检查点基本在SSD上 早期的检查点数据在HDDS AI数据量级和性能 检查点：提高存储容量和吞吐量 Blob 存储层一次性访问可实现高吞吐量 AI负载中的存储扩展性 总结 AI集群流程中的数据存储需要根据实际业务的量级和性能要求做分层存储, 这样成本可控且性能满足需求 AI行业也会带动存储行业发展,
1.7K11编辑于 2024-09-18 - 来自专栏存储公众号：王知鱼
微软：AI存储，SSD or HDD ?
Fig-2 AI训练工作流对应的存储方案定性说明。 Fig-3 图示 AI训练工作流中存储层动态交互过程。 核心要点：GPU从Blob存储层同时访问会驱动高吞吐量 Fig-6 从AI系统存储带宽需求，看HDD和SSD发展现况和机遇： • 当前系统使用SSD能满足训练和Checkpoint的性能读取（但成本较高 ）； • HDD的成本虽然较低，但带宽性能仍无法达到目前需求，需增长8-10x； • SSD朝着更高带宽/吞吐量前进，需在当前水平提升50-100x； Fig-7 1. 总结 作为运营主要AI训练资源云厂商，”巨硬“对AI应用层系统实践，应该说是富有经验的，从这篇分享中可以总结以下几点： • 和新兴存储厂商（WEKA/VAST/Infidant）等普遍拥抱闪存基础设施& （Fig-5）； • HDD/SSD介质发展趋势，AI场景要兼顾容量和性能（Fig-7）。
1.2K10编辑于 2025-02-11 - 来自专栏存储公众号：王知鱼
SuperMicro：AI存储硬件方案
SuperMicro：AI存储硬件方案-Fig-1 云厂商 AI存储方案 大规模 AI/GPU 集群基础设施。按可扩展单元 (SU，也称为 Pod，例如 256 个 GPU) 进行扩展。 SuperMicro：AI存储硬件方案-Fig-2 企业级AI存储方案 Pod 级别的部署（较云厂商规模、性能要求降低） 企业用例，推理与训练的比较 存储需求： • 全 NVMe 或 PB 级别的分层存储 • 并行文件系统，高性能对象存储。 SuperMicro：AI存储硬件方案-Fig-3 基础计算硬件方案 在执行 AIOps 和 MLOps 时： • GPU 密集型服务器加速 AI 训练和推理。 SuperMicro：AI存储硬件方案-Fig-5 计算+存储（性能层）+容量层 方案 所有训练数据集和模型都存储在本地 • 数据湖使用容量优化的存储。 SuperMicro：AI存储硬件方案-Fig-7 全闪存储系统参数 主要特点（Key Features）： • 支持双 Intel 和单 AMD 单 PCIe Gen5 处理器。
1K10编辑于 2025-02-11 - 来自专栏Linux学习日志
centos7搭建NFS共享存储服务
提供RPC支持的服务为rpcbind 提供NFS共享的服务为nfs 注意：先启动rpc服务，再启动nfs服务
2.2K10发布于 2020-08-26 - 来自专栏云计算D1net
混合云存储的7个最佳实践
Stephenson说，“这是一场灾难，因为存储解决方案固有的延迟影响了对延迟极其敏感的内部部署存储，并严重影响了存储系统的性能。 Stephenson说：“混合云存储的采用正在持续增长。全球主要云计算提供商正在努力克服与混合云存储相关的挑战。此外，主要的存储平台提供商正在继续构建连接和管理云存储平台所需的功能。” 7种混合云存储最佳实践 混合云存储架构可以支持企业IT部门的目标，以推动规模经济，提高IT运营模型效率，减少总体支出，以及淘汰老旧存储设备。 他说，“在这种情况下，人工将数据从内部部署存储迁移到云存储很容易。选择具有高数据访问延迟的典型冷云存储可能比选择在混合云系统中使用的热云存储的成本要低得多。” (7)不要担心进展缓慢 Stephenson说，“存储迁移并不是一个快速的过程。企业必须制定政策并让他们适应一段时间，然后才能看到收益。
2.5K10发布于 2020-11-19 - 来自专栏coding
centos7修改mysql数据存储目录
随着数据量的增长，mysql数据所占的空间会越来越大，而默认情况下mysql数据盘空间可能不够，这时候，就需要修改存储路径 ? image 网上有很多修改路径的方式，需要改配置文件，比较麻烦，在目标路径建好目录，再建个软连接就可以了，不需要改动任何配置 查看mysql数据存储位置： mysql> show global variables ---+-----------------------+ 1 row in set (0.00 sec) 关闭mysql服务，要将所有mysql进程都kill掉，如 killall mysqld 新建存储目录
2.6K00发布于 2019-04-18 - 来自专栏焱融科技
AI 场景的存储优化之路
人工智能是数据的消耗大户，对存储有针对性的需求。这次我们讲讲面向AI场景的存储性能优化思路。 谈优化之前，我们先分析一下AI访问存储的几个特点： 海量文件，训练模型的精准程度依赖于数据集的大小，样本数据集越大，就为模型更精确提供了基础。 跟一些AI公司的同事交流中，大家经常提到的一个问题就是，用户在某一个目录下存放了海量文件，导致训练的时候出现性能问题，其实就是碰到了存储的热点问题。 综上，对于AI场景来说，分布式存储面临三大挑战： 海量文件的存储 小文件的访问性能 目录热点 海量文件的存储 首先讨论海量文件存储的问题。海量文件存储的核心问题是什么，是文件的元数据管理和存储。 总结 本文针对海量文件存储、小文件访问性能、热点访问三个维度，分析了面向AI场景下，分布式文件系统面临的挑战，以及我们的应对思路，也希望借此文和更多技术专家交流如何对AI场景下的存储方案进行针对性的优化
1.9K10发布于 2020-02-27 - 来自专栏AI系统
【AI系统】指令和存储优化
除了应用极广的循环优化，在 AI 编译器底层还存在指令和存储这两种不同优化。指令优化指令优化依赖于硬件提供的特殊加速计算指令。这些指令，如向量化和张量化，能够显著提高计算密度和执行效率。 A8x32 * B32x8asm volatile ("mma.sync.aligned.m8n8k32.row.col.load.128b" " $0, $1, [$2], 0x7; // "$1" 和 "$3" 是矩阵 A 和 B 的指针// "$2" 和 "$4" 是矩阵 C 的指针，用于累加操作// "[$2]" 和 "[$4]" 是内存地址// "0x7" 是加载操作的控制码 在 AI 系统中，这种视角下的内存管理显然无法支撑起 AI 应用。AI 系统通常需要处理大量的数据和复杂的算法，这就需要高效的内存分配和回收策略来支持它们的运行。 NPU 的内存管理机制包括：片上内存：NPU 通常具有片上内存，用于存储权重和激活等数据，以减少与外部内存的通信开销。内存访问模式：NPU 针对 AI 工作负载进行了优化，支持高并发的内存访问模式。
78610编辑于 2024-11-29 - 来自专栏云云众生s
为什么AI青睐对象存储
AI模型做出的每一个决策，它发现的每一个洞见，都源于为其训练和运行提供动力的海量数据储备。然而，随着AI模型变得越来越庞大和复杂，它们与数据交互的方式也带来了传统存储系统无法应对的挑战。 分散在分布式系统中的小文件以及对随机访问的需求，突显了AI的需求与最初为结构化、顺序工作流构建的基础设施能力之间的不匹配。 这篇博文探讨了对象存储如何为AI对数据的永不满足的渴望提供动力。 传统上，存储层通常是手动管理的，需要仔细编排才能在快速的临时存储和较慢的归档层之间移动数据。跨越数十PB非结构化数据的AI工作负载受益于对象存储固有的可扩展性。 与将某些操作集中化的存储系统不同，对象存储将数据和元数据分布在节点集群中，消除了单点瓶颈。这种架构允许AI工作负载随着数据增长线性扩展。 相关文章： 革新存储：GPU在现代基础设施中的作用 Tecton应对下一代生成式AI的重大挑战：个性化 AI 测试：更广泛的覆盖范围、更少的错误、新的风险 DevOps中使用AI：开发人员和运维人员需要了解什么
43010编辑于 2025-01-25 - 来自专栏AI掘金志
华为AI存储「求解」大模型
另一方面，以大模型为代表的多模态AI，数据结构、类型远比单模态AI复杂，数据量也更加庞大。 两大趋势相互叠加，市场对于存储的增量需求呼之欲出。 二、AI存储三要素：精度、效率、能耗 以往，训练模型的方法简单而粗暴：大量的数据加上人工，以及强大的算力，不断调优，提高模型精度。 很明显，前一种方式被广泛使用并达到了极限，后一种方式正呈星火燎原之势，开始席卷整个AI行业。 三、AI存储如何让企业用上大模型？ 基于此，华为推出了两款AI存储产品：OceanStor A310 ，FusionCube A3000。 AI存储的未来 从工业社会到信息社会，伴随着新技术的发展，数据的总量呈几何级数增长。 如何利用好数据成为关键，而这又与存储技术息息相关，两者相互影响、互相作用。
50830编辑于 2023-08-26 - 来自专栏哎_小羊
初试 Centos7 上 Ceph 存储集群搭建
目录 Ceph 介绍 环境、软件准备 Ceph 预检 Ceph 存储集群搭建 1、Ceph 介绍 Ceph 是一个开源的分布式存储系统，包括对象存储、块设备、文件系统。 Ceph 存储集群具备了企业级存储的能力，它通过组织大量节点，节点之间靠相互通讯来复制数据、并动态地重分布数据，从而达到高可用分布式存储功能。 2、环境、软件准备 本次演示环境，我是在虚拟机 Linux Centos7 上操作，通过虚拟机完成存储集群搭建，以下是安装的软件及版本： Centos：release 7.4.1708 (Core) Ceph Ceph 分布式存储集群有三大组件组成，分为：Ceph Monitor、Ceph OSD、Ceph MDS，后边使用对象存储和块存储时，MDS 非必须安装，只有当使用 Cephfs 文件存储时，才需要安装 本次就先记录到这，下一篇我们继续研究学习 Ceph 存储体系中的对象存储、块设备和文件系统。 参考资料 Ceph 简介 Ceph 预检 Ceph 存储集群搭建 Ceph 体系结构
4.5K60发布于 2018-01-02 - 来自专栏运维经验分享
CentOS7修改MongoDB默认数据存储路径
备份原来文件 1 $ sudo mv /var/lib/mongo /var/lib/mongo.bak 修改数据存储路径并服务重启成功后可删除。 4.
3.2K20发布于 2019-03-16 - 来自专栏全栈工程师修炼之路
7-Kubernetes入门基础之存储Volume介绍
描述: 共享存储为分布式系统非常重要的一部分，存储一般要求稳定、可用、性能、可靠。 1.从用户角度看 存储就是一块盘或者一个目录，用户不关心盘或者目录如何实现，用户要求非常“简单”，就是稳定，性能好。为了能够提供稳定可靠的存储产品，各个厂家推出了各种各样的存储技术和概念。 3.从产品定义角度 存储分为本地存储（DAS），网络存储（NAS），存储局域网（SAN）和软件定义存储（SDS）四大类 DAS就是本地盘，直接插到服务器上 NAS是指提供NFS协议的NAS设备，通常采用磁盘阵列 /MPI），块存储（iSCSI/Qemu）和对象存储（S3/Swift）三大类。 它是由管理员设置的存储并且是属于群集的一部分(资源) 此API对象包含存储实现的细节，即NFS、iSCSl或特定于云供应商的存储系统。
1.8K22编辑于 2022-09-29 - 来自专栏大数据文摘
云存储：面向企业的7项必备功能
6.灵活的存储容量，价位又合理 你的存储需求是贵企业所特有的。小企业主最有可能寻找这样一种云存储平台：能够满足5名到10名员工的数据需求，又有充足的存储容量，而价位合理。 一些存储平台提供了数量有限的存储容量，但价格低廉；但如果用户需要更大的存储容量，价格就低廉得多；另一些服务一开始收的价格比较高，不过提供了费用较低的存储容量较大的方案。 1TB存储容量的价格具有多样性，有的低至250美元，有的高达每年数千美元，这取决于你需要哪些功能特性。而只有一些服务提供数据存储容量无限制的方案，不过你这家小企业可能不需要很大的存储容量。 不过，最佳的云存储解决方案可能是能伴随贵企业一同成长的解决方案。你一开始可能只有几个员工，但要考虑挑选的服务能够在将来适合贵企业的需求。 7.可靠的技术支持 说到贵企业的日常运营，技术难题绝非儿戏。 最佳服务响应迅即，而且会有人员为你提供24/7的全天候服务。 除了电子邮件和电话支持外，一些服务还提供实时文本聊天，帮助你排查故障、解决问题。
1.7K40发布于 2018-05-23
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号