首页
学习
活动
专区
圈层
工具
发布

MySQL低配数据库被大量数据导入时KO

在一个低配MySQL数据库(笔记本电脑虚机环境,虚机配置2CPU/3G内存),在3000万级别的大量数据LOAD DATA方式导入时,坚持一小时后,终于被KO了,甚至没写下任何有用的日志,只是在操作界面报错...@node1:1 ~]# systemctl status mysql● mysql.service - Percona XtraDB Cluster Loaded: loaded (/usr/lib...└─8422 /usr/sbin/mysqld --user=mysql --log-error-verbosity=3 --wsrep_recover --log_error=/mysql/pxc/......此时在数据库日志没有任何有用的信息,时接近30分钟,才启动成功,可见MySQL在异常退出后在启动时,也会遭遇漫长的恢复过程。...此时数据库日志仍然显示之前的信息:2022-02-25T07:01:33.501960Z 2 [Note] [MY-000000] [WSREP] wsrep_notify_cmd is not defined

2.3K30
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    【原创】MySQL数据库开发中的6个“避免”

    由于近期工作涉及数据库相关的操作较多,就根据自己的实战经历整理了一些数据库开发的规范用法,利用6个“避免”来概括。...1、避免在数据库中做运算 有句话叫做“别让脚趾头想事情,那是脑瓜子的职责”,用在数据库开发中,说的就是避免让数据库做她不擅长的事情。...MySQL并不擅长数学运算和逻辑判断,所以尽量不在数据库做运算,复杂运算可以移到程序端CPU。...5、避免select * 使用select *可能会返回不使用的列的数据。它在MySQL数据库服务器和应用程序之间产生不必要的I/O磁盘和网络流量。 如果明确指定列,则结果集更可预测并且更易于管理。...6、避免在数据库里存图片 图片确实是可以存储到数据库里的,例如通过二进制流将图片存到数据库中。 但是,强烈不建议把图片存储到数据库中!!!!

    88130

    MySQL避免索引失效

    有的时候博客内容会有变动,首发博客是最新的,其他博客地址可能会未同步,认准https://blog.zysicyj.top MySQL避免索引失效 在使用MySQL数据库时,正确地使用索引可以显著提高查询性能...以下是一些避免索引失效的策略: 1. 避免在索引列上使用函数或表达式 当在索引列上使用函数或对列进行计算时,索引将不会被使用。...「改进方法」: 尽量避免以通配符开始的模式,或者使用全文索引。 7. 避免在索引列上进行数学运算或拼接 与在索引列上使用函数类似,进行数学运算或拼接也会导致索引失效。...使用FORCE INDEX 如果确定某个索引是最优的,但MySQL优化器没有选择它,可以使用FORCE INDEX来强制使用特定的索引。...「示例」: SELECT * FROM users FORCE INDEX (index_name) WHERE username = 'johndoe'; 遵循这些策略可以帮助你更有效地利用MySQL

    1.1K11

    MySQL如何避免使用swap

    对于DBA来说Linux比较让人头疼的一个地方是,它不会因为MySQL很重要就避免将分配给MySQL的地址空间映射到swap上。...这篇blog主要讲讲我们作为DBA,怎样尽量避免MySQL惨遭swap的毒手。 首先我们要了解点基础的东西,比如说为什么会产生swap。假设我们的物理内存是16G,swap是4G。...如果MySQL本身已经占用了12G物理内存,而同时其他程序或者系统模块又需要6G内存,这时候操作系统就可能把MySQL所拥有的一部分地址空间映射到swap上去。...cp一个大文件,或用mysqldump导出一个很大的数据库的时候,文件系统往往会向Linux申请大量的内存作为cache,一不小心就会导致L使用swap。...当然,这个参数只能减少使用swap的概率,并不能避免Linux使用swap。 2、修改MySQL的配置参数innodb_flush_method,开启O_DIRECT模式。

    3K40

    微信小程序后台返回大量多余数据的处理

    打一架,不行就再打一架-----来源:视觉中国 后台接口返回一个数组,数组里面N多对象,每个对象里面几十上百条数据,最好玩的是,我只需要每个对象里面的某两个数据、、、、 类似这种: datas:[...说实话,不大,又不是几兆的图片,返回数据的速度反正我感受不到延迟。 但是数据量过多对小程序渲染界面有影响吗? 答案是:有!...那么我们能做的就是尽量少传数据,而此时后台返回这一大串数据就与此相悖了,所以最好是新建一个tempData,将要的数据取出来之后再setDta这个tempData,以此来提高微信小程序的页面渲染速度,提升微信小程序运行效率...name: data.name } }) console.log(tempDatas) 此时我们再使用setData({})就能提高渲染效率了 以上就是微信小程序开发中关于后台返回大量冗余数据的处理方案啦

    2.1K30

    下一个猎杀目标 | 近期大量MySQL数据库遭勒索攻击

    随着MongoDB, ElasticSearch, Hadoop, CouchDB和Cassandra服务器的的沦陷,MySQL数据库成了攻击者的下一个猎杀目标。...他们劫持了数百个MySQL数据库(也可能是上千个),删除了存储数据,并留下勒索信息,要求支付0.2比特币的赎金(约为235美元)。 ?...攻击以“root”密码暴力破解开始,一旦成功登陆,该黑客会获取已有MySQL数据库及其表的列表,TA在已有的数据库中新建一个名为WARNING的表,插入信息包括一个邮箱地址、比特币地址和支付需求。...这不是MySQL服务器第一次被勒索。2015年发生了同样的事,当时攻击者使用未修复的phpBB论坛劫持了数据库并对网站进行勒索,史称RansomWeb攻击。...MySQL数据库被勒索攻击的事件不容小嘘,瞬间暴涨的被勒索MongoDB数据库数量就是前车之鉴。(文章回顾传送门)

    2.4K60
    领券