我已经使用命令(./bin/start-micro-quickstart)部署了Druid单服务器
我的服务器规格是8vCPU和32 My内存(EC2 t2.2Xlarge),还增加了100 My的交换空间,我正在尝试将27M条记录从kafka转换到Druid。
现在,我在Druid数据源中显示了4M条记录,总大小为506 MB,段大小为5400 (平均段大小为92.99 KB)
我的内存使用量是
total used free shared buff/cache available
Mem: 31G 30G 248M 24K 207M 96M
Swap: 99G 78G 21G我的DataSource大小是506MB,为什么内存消耗是108 GB?
这些都是内存中的数据段吗?
哪个druid服务使用CPU,哪个Druid服务使用内存?
发布于 2020-05-31 21:14:54
你正在运行多少个peon任务?由于您使用的是kafka摄取,所以我假设您使用的是superviser spec。如果您有太多的主题,并且每个主题都有一个supervisor spect,则会占用内存。检查直接内存需求。https://druid.apache.org/docs/latest/configuration/index.html
https://stackoverflow.com/questions/61520732
复制相似问题