首页
学习
活动
专区
圈层
工具
发布

浪费内存?多大个事?

遥想盖子当年,MS 红火了,谈笑间,640k 内存足矣。 - 程序君 现在已经不是从指缝中扣内存的时代了。...现在不是论 M,更不是论 K 的时代了。每 Gb 内存,也就是 711 一份好炖的价格,咱不差钱,32G 不够,上 128G,还不够,只要系统支持,咱可以照着 Tb 往上撸,多大个事!...好吧,其实这也不是多大点事,原本 150ms 完成的事情,现在即便最坏的情况,500ms 完成,也没啥大不了哈。 好,咱么再换个角度,谈谈 capacity。...假设你的系统要能支持到 40M 的这种结构的热数据,那么,对于前者,一主两备的 cluster,三台组个 full mesh 网路足矣;对于后者,你需要至少 3 x 7 台,可能稍稍得花些心思:full...浪费内存,还是挺大一个事儿的。现在你知道贵司为啥没鼓励师了吧 :0

3.4K80
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    一条SQL能占多大内存?

    初学计算机时,我经常琢磨的一个问题是:一个进程到底能吃多大内存,能把系统内存吃完? 学了数据库后,我又开始问自己类似的问题,一条 SQL 能把数据库内存全部吃完?...假设数据库系统内存 有128GB,全盘扫描一遍 200GB的表,是不是就把数据库内存撑爆了,别人的 SQL 就不能运行了? 一开始,这个问题我始终没找到答案。...虚拟机服务器总共有8G内存,从数据库导出一张2GB的表,监测服务器内存的使用量。 1- 用 SQL Server 自带的“导出”功能,将一张2GB的表,导出到一个文本文件。...再启动 2个抽取数据的任务, 可得系统内存的比率图: 如果内存全部耗完,整个操作系统变得不稳定,SQL Server 的稳定性即即将崩溃。...回到主问题,一条 SQL 能占多大内存?

    4K20

    一个Java对象到底占用多大内存

    之所以比普通对象占用内存多是因为需要额外的空间存储数组的长度。 先考虑下new Integer[0]占用的内存大小,长度为0,即是对象头的大小: 未开启压缩:24bytes ?...递归计算复合对象占用的内存的时候需要注意的是:对齐填充是以每个对象为单位进行的,看下面这个图就很容易明白。 ?...现在我们来手动计算下C对象占用的全部内存是多少,主要是三部分构成:C对象本身的大小+数组对象的大小+B对象的大小。...实际工作中真正需要手动计算对象大小的场景应该很少,但是个人觉得做为基础知识每个Java开发人员都应该了解,另外:对自己写的代码大概占用多少内存,内存中是怎么布局的应该有一个直觉性的认识。...码农笔记网 » 一个Java对象到底占用多大内存

    2.7K10

    一个Java对象到底占用多大内存?

    最近在调研MAT和VisualVM源码实现,遇到一个可疑问题,两者计算出来的对象大小不一致,才有了这样疑惑。 一个Java对象到底占用多大内存?...字节 实例数据 原生类型的内存占用情况如下: boolean 1 byte 1 short 2 char 2 int 4 float 4 long 8 double 8 引用类型的内存占用和系统位数以及启动参数...意思是每次分配的内存大小一定是8的倍数,如果对象头+实例数据的值不是8的倍数,那么会重新计算一个较大值,进行分配。...结果 有了对象各部分的内存占用大小,可以很轻松的计算出ABCD各对象在64位系统,且开启 UseCompressedOops参数时的大小。...可以得出,VisualVM的显示结果有点问题,主要因为以下两点: 首先,没有考虑是否开启 UseCompressedOops 其次,没有考虑内存对齐填充的情况 感兴趣的同学,可以动手实践一下,这样可以加深对象内存布局的理解

    2.6K10

    一个Java对象到底占用多大内存

    之所以比普通对象占用内存多是因为需要额外的空间存储数组的长度。 先考虑下new Integer[0]占用的内存大小,长度为0,即是对象头的大小: 未开启压缩:24bytes ?...递归计算复合对象占用的内存的时候需要注意的是:对齐填充是以每个对象为单位进行的,看下面这个图就很容易明白。 ?...现在我们来手动计算下C对象占用的全部内存是多少,主要是三部分构成:C对象本身的大小+数组对象的大小+B对象的大小。...实际工作中真正需要手动计算对象大小的场景应该很少,但是个人觉得做为基础知识每个Java开发人员都应该了解,另外:对自己写的代码大概占用多少内存,内存中是怎么布局的应该有一个直觉性的认识。...码农笔记网 » 一个Java对象到底占用多大内存

    2.3K10

    Linux内存描述之高端内存--Linux内存管理(五)

    但是,当Linux物理内存超过1G时,线性访问机制就不够用了,因为只能有1G的内存可以被映射,剩余的物理内存无法被内核管理,所以,为了解决这一问题,Linux把内核地址分为线性区和非线性区两部分,线性区规定最大为...DMA Zone通常很小,只有几十M,低端内存区与高端内存区的划分来源于Linux内核空间大小的限制。...1G) 2.3 Linux内核高端内存的理解 前 面我们解释了高端内存的由来。...目前现实中,64位Linux内核不存在高端内存,因为64位内核可以支持超过512GB内存。若机器安装的物理内存超过内核地址空间范围,就会存在高端内存。 5.3 用户进程能访问多少物理内存?...若把所有地址空间都给内存,那么用户进程怎么使用内存?怎么保证内核使用内存和用户进程不起冲突? 让我们忽略Linux对段式内存映射的支持。

    16.5K24

    一条SQL到底能占多大内存?

    SQL145题系列 初学计算机时,我经常琢磨的一个问题是:一个进程到底能吃多大内存,能把系统内存吃完? 学了数据库后,我又开始问自己类似的问题,一条 SQL 能把数据库内存全部吃完?...假设数据库系统内存 有128GB,全盘扫描一遍 200GB的表,是不是就把数据库内存撑爆了,别人的 SQL 就不能运行了? 一开始,这个问题我始终没找到答案。...虚拟机服务器总共有8G内存,从数据库导出一张2GB的表,监测服务器内存的使用量。 1- 用 SQL Server 自带的“导出”功能,将一张2GB的表,导出到一个文本文件。...再启动 2个抽取数据的任务, 可得系统内存的比率图: 如果内存全部耗完,整个操作系统变得不稳定,SQL Server 的稳定性即即将崩溃。...回到主问题,一条 SQL 能占多大内存?

    3K10

    Linux - Linux内存管理

    移除交换空间 ---- 概念 内存管理是Linux系统重要的组成部分。...为了解决内存紧缺的问题,Linux引入了虚拟内存的概念。为了解决快速存取,引入了缓存机制、交换机制等。...当需要用到原始内容时,这些信息会被重新从交换空间读入物理内存。 Linux的内存管理采取的是分页存取机制。...要深入了解Linux内存运行机制,需要知道下面提到的几个方面。 首先,Linux系统会不时地进行页面交换操作,以保持尽可能多的空闲物理内存。...其次,Linux进行页面交换是有条件的,不是所有页面在不用时都交换到虚拟内存中,Linux内核根据“最近最经常使用”算法,仅仅将一些不经常使用的页面文件交换到虚拟内存中。

    64.3K42

    Android 开发绕不过的坑:你的 Bitmap 究竟占多大内存?

    另外,本文的依据主要来自 android 5.0 的源码,其他版本可能略有出入。文章难免疏漏,欢迎指正~ 1、占了多大内存?...吃内存呗,时不时还给你来个 OOM 冲冲喜,让你的每一天过得有滋有味(真是没救了)。那每次工程里面增加一张图片的时候,我们都需要关心这货究竟要占多大的坑,占多大呢?...---- 2、给我一张图我告诉你占多大内存 每次都问 Bitmap 你到底多大啦。。感觉怪怪的,毕竟我们不能总是去问,而不去搞清楚它为嘛介么大吧。能不能给它算个命,算算它究竟多大呢?...等等,请收起你的口水,Android 官方并不支持这个。是的,你没看错,官方并不支持。...---- 看来这个法子还真行啊,占用内存一下小很多。不过由于官方并未做出支持,因此这个方法有诸多限制,比如不能在 xml 中直接配置,,生成的 Bitmap 不能用于构建 Canvas 等等。

    4.3K111

    聊聊 Linux 的内存统计

    点击上方“小强的进阶之路”,选择“星标”公众号 优质文章,及时送达 预计阅读时间: 18分钟 写在前面 本文主要分析 Linux 系统内存统计的一些指标以及进程角度内存使用监控的一些方法。...Linux 的内存管理从物理内存管理到虚拟内存管理涉及的概念和统计项实在太多,本文从实用和系统运维的角度出发,只列举一些最实用的统计。...最上面新版本系统的输出中有一个available项目表示可用内存,值小于 free + buff/cache,内核 3.14 之后支持该特性(虽然也不是绝对意义上的精确的可用内存大小,囧)。...共享内存、可执行程序的文件、动态库、mmap的文件等都统计在这里 Shmem — 共享内存的大小,包括Shared Memory、tmpfs和devtmpfs 注意 Linux 的内存是真正使用时才分配的...最新的内核文档提到了要加smaps_rollup这个统计,支持Pss_Anon、Pss_File和Pss_Shmem三个分类统计,这个在进程级别看,用到内存就很清晰了。

    7.6K40

    【Linux 内核 内存管理】Linux 内核内存布局 ③ ( Linux 内核 动态分配内存 系统接口函数 | 统计输出 vmalloc 分配的内存 )

    文章目录 一、Linux 内核 动态分配内存 系统接口函数 二、统计输出 vmalloc 分配的内存 一、Linux 内核 动态分配内存 系统接口函数 ---- Linux 内核 " 动态分配内存 "...是通过 " 系统接口 " 实现的 , 下面介绍几个重要的 接口函数 ; ① 以 " 页 " 为单位分配内存 : alloc_pages , __get_free_page ; ② 以 " 字节 " 为单位分配..." 虚拟地址连续的内存块 " : vmalloc ; ③ 以 " 字节 " 为单位分配 " 物理地址连续的内存块 " : kmalloc ; 注意 该 " 物理地址连续的内存块 " 是以 Slab 为中心的...; 二、统计输出 vmalloc 分配的内存 ---- 执行 grep vmalloc /proc/vmallocinfo 命令 , 可以统计输出 通过 vmalloc 函数分配的 " 虚拟地址连续的内存块

    6.8K30

    Linux吃掉我的内存

    而当我们使用free命令查看Linux系统内存使用情况时,会 发现内存使用一直处于较高的水平,即使此时系统并没有运行多少软件。...这正是Windows和Linux在内存管理上的区别,乍一看,Linux系统吃掉我们的内存(Linux ate my ram),但其实这也正是其内存管理的特点。 ?...而Linux会充分利用这些空闲的内存,设计思想是内存空闲还不如拿来多缓存一些数据,等下次程序再次访问这些数据速度就快了,而如果程序要使用内存而系统中内存又不足时,这时不是使用交换分区,而是快速回收部分缓存...因此,可以看出,buffers/cached真是百益而无一害,真正的坏处可能让用户产生一种错觉——Linux耗内存!...其实不然,Linux并没有吃掉你的内存,只要还未使用到交换分区,你的内存所剩无几时,你应该感到庆幸,因为Linux缓存了大量的数据,也许下一次你就从中受益!

    1.4K50

    Linux 的内存分页管理

    内存提供的存储空间,除了能满足内核的运行需求,还通常能支持运行中的进程。即使进程所需空间超过内存空间,内存空间也可以通过少量拓展来弥补。换句话说,内存的存储能力,和计算机运行状态的数据总量相当。...有趣的是,尽管进程和内存的关系如此紧密,但进程并不能直接访问内存。在Linux下,进程不能直接读写内存中地址为0x1位置的数据。...因此,Linux采用了分页(paging)的方式来记录对应关系。所谓的分页,就是以更大尺寸的单位页(page)来管理内存。在Linux中,通常每页大小为4KB。...Linux把物理内存和进程空间都分割成页。 内存分页,可以极大地减少所要记录的内存对应关系。我们已经看到,以字节为单位的对应记录实在太多。...因此,Linux中的分页表,采用了多层的数据结构。多层的分页表能够减少所需的空间。 我们来看一个简化的分页设计,用以说明Linux的多层分页表。

    1.6K30

    Linux内存描述之内存节点node--Linux内存管理(二)

    CPU访问本地内存的速度比访问远程内存的速度要快 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大....因此linux内核需要用一种体系结构无关的方式来表示内存....* * Nests above zone->lock and zone->span_seqlock * 当系统支持内存热插拨时,用于保护本结构中的与节点大小相关的字段。...如果内核编译只支持当个结点(即使用平坦内存模型), 则没有结点位图, 上述操作该位图的函数则变成空操作, 其定义形式如下, 参见include/linux/nodemask.h?...-3.x~4.x的实现 node_data内存节点数组 在新的linux3.x~linux4.x的内核中,内核移除了pg_data_t的pgdat_next之指针域, 同时也删除了pgdat_list链表

    10.6K21

    Linux内存描述之内存页面page--Linux内存管理(四)

    1 Linux如何描述物理内存 Linux把物理内存划分为三个层次来管理 层次 描述 存储节点(Node) CPU被划分为多个节点(node), 内存则被分簇, 每个CPU对应一个本地物理内存, 即一个...内存中的每个节点都是由pg_data_t描述,而pg_data_t由struct pglist_data定义而来, 该数据结构定义在include/linux/mmzone.h, line 615, 每个结点关联到系统中的一个处理器...简单来说, 页是一个数据块, 可以存放在任何页框(内存中)或者磁盘(被交换至交换分区)中 我们今天就来详细讲解一下linux下物理页帧的描述 2 页帧 内核把物理页作为内存管理的基本单位....,每一位代表一种状态,所以至少可以同时表示出32中不同的状态,这些状态定义在linux/page-flags.h中 virtual 对于如果物理内存可以直接映射内核的系统, 我们可以之间映射出虚拟地址与物理地址的管理...因此在后来linux-2.4.x的更新中, 删除了这个字段, 取而代之的是page->flags的最高ZONE_SHIFT位和NODE_SHIFT位, 存储了其所在zone和node在内存区域表zone_table

    11.1K11

    Linux内存描述之概述--Linux内存管理(一)

    NUMA总是多处理器计算机,系统的哪个CPU都有本地内存, 可支持快速的访问, 各个处理器之前通过总线链接起来, 以支持堆其他CPU的本地内存的访问, 当然访问要比本地内存慢....2 (N)UMA模型中linux内存的机构 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大. 因此linux内核需要用一种体系结构无关的方式来表示内存...., 用于表示不同范围的内存, 内核可以使用不同的映射方式映射物理内存 页面(Page) 内存被细分为多个页面帧, 页面是最基本的页面分配的单位 为了支持NUMA模型,也即CPU对不同内存单元的访问时间可能不同...ZONE_HIGHEM : 这个区包”高端内存”,其中的页能不永久地映射到内核地址空间 而为了兼容一些设备的热插拔支持以及内存碎片化的处理, 内核也引入一些逻辑上的内存区....2.6 高端内存 由于能够被Linux内核直接访问的ZONE_NORMAL区域的内存空间也是有限的,所以LINUX提出了高端内存(High memory)的概念,并且允许对高端内存的访问

    9.3K30

    Linux的内存分页管理

    内存提供的存储空间,除了能满足内核的运行需求,还通常能支持运行中的进程。即使进程所需空间超过内存空间,内存空间也可以通过少量拓展来弥补。换句话说,内存的存储能力,和计算机运行状态的数据总量相当。...有趣的是,尽管进程和内存的关系如此紧密,但进程并不能直接访问内存。在Linux下,进程不能直接读写内存中地址为0x1位置的数据。...因此,Linux采用了分页(paging)的方式来记录对应关系。所谓的分页,就是以更大尺寸的单位页(page)来管理内存。在Linux中,通常每页大小为4KB。...Linux把物理内存和进程空间都分割成页。 内存分页,可以极大地减少所要记录的内存对应关系。我们已经看到,以字节为单位的对应记录实在太多。...因此,Linux中的分页表,采用了多层的数据结构。多层的分页表能够减少所需的空间。 我们来看一个简化的分页设计,用以说明Linux的多层分页表。

    1.7K20
    领券