首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Clickhouse - OOM -当执行Clickhouse数据导入功能时,程序会被系统终止

Clickhouse - OOM -当执行Clickhouse数据导入功能时,程序会被系统终止
EN

Stack Overflow用户
提问于 2021-04-29 18:25:56
回答 1查看 89关注 0票数 1

当我执行Clickhouse数据导入功能时,程序被系统终止。

执行命令如下:clickhouse-client --user default --password xxxxx --port 9000 -hxxx --database="bds" --input_format_allow_errors_ratio=0.1 --query="insert into ... FORMAT CSV" < /1.csv

报告的错误是:[2478416.927226] Out of memory: Kill process 19696 (clickhouse-serv) score 12 or sacrifice child [2478416.928855] Killed process 19696 (clickhouse-serv), UID 0, total-vm:46668916kB, anon-rss:1008480kB, file-rss:0kB, shmem-rss:0kB

数据文件有122g,服务器内存128G,如何让Clickhouse命令合理导入呢,希望大家能帮我,谢谢!

EN

回答 1

Stack Overflow用户

发布于 2021-04-29 20:51:01

最有可能是个bug。您使用的是什么版本的CH?

尝试添加参数--input_format_parallel_parsing=0 --optimize_on_insert=0

代码语言:javascript
复制
--input_format_parallel_parsing arg                              Enable parallel parsing for some data formats.

--optimize_on_insert arg                                         Do the same transformation for inserted block of data as if merge was done on this block.
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/67315549

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档