首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Druid占用的内存太多

Druid占用的内存太多
EN

Stack Overflow用户
提问于 2020-04-30 17:58:32
回答 1查看 404关注 0票数 1

我已经使用命令(./bin/start-micro-quickstart)部署了Druid单服务器

我的服务器规格是8vCPU和32 My内存(EC2 t2.2Xlarge),还增加了100 My的交换空间,我正在尝试将27M条记录从kafka转换到Druid。

现在,我在Druid数据源中显示了4M条记录,总大小为506 MB,段大小为5400 (平均段大小为92.99 KB)

我的内存使用量是

代码语言:javascript
复制
             total        used        free      shared  buff/cache   available
Mem:            31G         30G        248M         24K        207M         96M
Swap:           99G         78G         21G

我的DataSource大小是506MB,为什么内存消耗是108 GB?

这些都是内存中的数据段吗?

哪个druid服务使用CPU,哪个Druid服务使用内存?

EN

回答 1

Stack Overflow用户

发布于 2020-05-31 21:14:54

你正在运行多少个peon任务?由于您使用的是kafka摄取,所以我假设您使用的是superviser spec。如果您有太多的主题,并且每个主题都有一个supervisor spect,则会占用内存。检查直接内存需求。https://druid.apache.org/docs/latest/configuration/index.html

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/61520732

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档