blocks|key|2966259|text|http://www.maatkit.org/具有mk并行转储和mk并行恢复|type|unstyled|depth|inlineStyleRanges|entityRanges|offset|length|data|2966260|2966261|如果你一直希望有多线程的mysqldump，那就别想了。此工具并行转储MySQL表。它是一个更智能的mysqldump，它既可以充当mysqldump的包装器(具有合理的默认行为)，也可以充当SELECT+INTO+OUTFILE的包装器。它是为处理非常大的数据量的高性能应用程序而设计的，其中速度非常重要。它利用多个CPU和磁盘来更快地转储您的数据。|blockquote|2966262|2966263|2966264|mysqldump中还有各种潜在的选项，比如在导入转储时不创建索引，而是在完成时进行整体索引。|2966265|entityMap|0|LINK|mutability|MUTABLE|url|http://www.maatkit.org/^0|0|N|0|0|0|0|0|0|0^^$0|@$1|2|3|4|5|6|7|T|8|@]|9|@$A|U|B|V|1|W]]|C|$]]|$1|D|3|-4|5|6|7|X|8|@]|9|@]|C|$]]|$1|E|3|F|5|G|7|Y|8|@]|9|@]|C|$]]|$1|H|3|-4|5|6|7|Z|8|@]|9|@]|C|$]]|$1|I|3|-4|5|6|7|10|8|@]|9|@]|C|$]]|$1|J|3|K|5|6|7|11|8|@]|9|@]|C|$]]|$1|L|3|-4|5|6|7|12|8|@]|9|@]|C|$]]]|M|$N|$5|O|P|Q|C|$R|S]]]]

<a href="http://www.maatkit.org/" rel="noreferrer">http://www.maatkit.org/</a> has a mk-parallel-dump and mk-parallel-restore

<blockquote>
 If you’ve been wishing for multi-threaded mysqldump, wish no more. This tool dumps MySQL tables in parallel. It is a much smarter mysqldump that can either act as a wrapper for mysqldump (with sensible default behavior) or as a wrapper around SELECT INTO OUTFILE. It is designed for high-performance applications on very large data sizes, where speed matters a lot. It takes advantage of multiple CPUs and disks to dump your data much faster.
</blockquote>

There are also various potential options in mysqldump such as not making indexes while the dump is being imported - but instead doing them en-mass on the completion.

blocks|key|2966101|text|type|unstyled|depth|inlineStyleRanges|entityRanges|data|2966102|获取高性能MySQL的副本。很棒的书。mysql+|ordered-list-item|2966103|Extended+inserts+in+dumps+|2966104|Dump+--tab格式以便您可以使用mysqlimport，它比mysql|2966105|使用不同的数据库引擎。导入到像innodb这样的事务性很强的引擎中是非常慢的。|2966106|查看Maakit工具包中的表比较脚本，看看是否可以更新表，而不是转储和导入表。但你说的可能是backups/restores.|2966107|2966108|entityMap^0|0|0|0|0|0|0|0^^$0|@$1|2|3|-4|4|5|6|O|7|@]|8|@]|9|$]]|$1|A|3|B|4|C|6|P|7|@]|8|@]|9|$]]|$1|D|3|E|4|C|6|Q|7|@]|8|@]|9|$]]|$1|F|3|G|4|C|6|R|7|@]|8|@]|9|$]]|$1|H|3|I|4|C|6|S|7|@]|8|@]|9|$]]|$1|J|3|K|4|C|6|T|7|@]|8|@]|9|$]]|$1|L|3|-4|4|5|6|U|7|@]|8|@]|9|$]]|$1|M|3|-4|4|5|6|V|7|@]|8|@]|9|$]]]|N|$]]

<ol>
<li>Get a copy of High Performance MySQL. Great book. </li>
<li>Extended inserts in dumps </li>
<li>Dump with --tab format so you can use mysqlimport, which is
faster than mysql &lt; dumpfile</li>
<li>Import with multiple threads, one for each table.</li>
<li>Use a different database engine if possible. importing into a
heavily transactional engine like innodb is awfully slow. Inserting
into a non-transactional engine like
MyISAM is much much faster.</li>
<li>Look at the table compare script in the Maakit toolkit and see if you can
update your tables rather than dumping them and importing them. But 
you're probably talking about backups/restores.</li>
</ol>

blocks|key|3811457|text|如果您要导入到InnoDB，您可以做的最有效的事情就是将|type|unstyled|depth|inlineStyleRanges|entityRanges|data|3811458|innodb_flush_log_at_trx_commit+=+2|code-block|syntax|javascript|3811459|在您的my.cnf中，当导入正在运行时，暂时。如果你需要ACID，你可以把它放回1。|offset|length|style|CODE|3811460|entityMap^0|0|0|3|6|14|1|0^^$0|@$1|2|3|4|5|6|7|O|8|@]|9|@]|A|$]]|$1|B|3|C|5|D|7|P|8|@]|9|@]|A|$E|F]]|$1|G|3|H|5|6|7|Q|8|@$I|R|J|S|K|L]|$I|T|J|U|K|L]]|9|@]|A|$]]|$1|M|3|-4|5|6|7|V|8|@]|9|@]|A|$]]]|N|$]]

If you are importing to InnoDB the single most effective thing you can do is to put

<pre><code>innodb_flush_log_at_trx_commit = 2
</code></pre>

in your <code>my.cnf</code>, temporarily while the import is running. You can put it back to <code>1</code> if you need ACID.

blocks|key|5221823|text|我猜你的问题还取决于瓶颈在哪里：|type|unstyled|depth|inlineStyleRanges|entityRanges|data|5221824|5221825|如果您的网络是一个瓶颈，您还可以查看-C/--compress标志，以使您的计算机内存不足(即：开始交换内存)您应该购买更多内存。|unordered-list-item|offset|length|style|CODE|5221826|5221827|另外，看看mysqldump的--quick标志(如果使用的是MyIsam，还要看看--disable-keys+)。|5221828|entityMap^0|0|0|I|2|L|A|0|0|5|9|F|7|16|E|0^^$0|@$1|2|3|4|5|6|7|O|8|@]|9|@]|A|$]]|$1|B|3|-4|5|6|7|P|8|@]|9|@]|A|$]]|$1|C|3|D|5|E|7|Q|8|@$F|R|G|S|H|I]|$F|T|G|U|H|I]]|9|@]|A|$]]|$1|J|3|-4|5|6|7|V|8|@]|9|@]|A|$]]|$1|K|3|L|5|6|7|W|8|@$F|X|G|Y|H|I]|$F|Z|G|10|H|I]|$F|11|G|12|H|I]]|9|@]|A|$]]|$1|M|3|-4|5|6|7|13|8|@]|9|@]|A|$]]]|N|$]]

I guess your question also depends on where the bottleneck is:

<ul>
<li>If your network is a bottleneck you could also have a look at the <code>-C</code>/<code>--compress</code> flag to <code>mysqldump</code>.</li>
<li>If your computer runs out of memory (ie. starts swapping) you should buy more memory.</li>
</ul>

Also, have a look at the <code>--quick</code> flag for <code>mysqldump</code> (and <code>--disable-keys</code> if you are using MyIsam).

blocks|key|739347|text|在转储中使用扩展插入应该会使导入更快。|type|unstyled|depth|inlineStyleRanges|entityRanges|data|739348|entityMap^0|0^^$0|@$1|2|3|4|5|6|7|D|8|@]|9|@]|A|$]]|$1|B|3|-4|5|6|7|E|8|@]|9|@]|A|$]]]|C|$]]

Using extended inserts in dumps should make imports faster.

blocks|key|5221624|text|关闭外键检查并打开自动提交。|type|unstyled|depth|inlineStyleRanges|entityRanges|data|5221625|entityMap^0|0^^$0|@$1|2|3|4|5|6|7|D|8|@]|9|@]|A|$]]|$1|B|3|-4|5|6|7|E|8|@]|9|@]|A|$]]]|C|$]]

turn off foreign key checks and turn on auto-commit.

blocks|key|2966348|text|如果您只有MyIsam表，那么mysqlhotcopy可能也是一种选择。|type|unstyled|depth|inlineStyleRanges|offset|length|style|CODE|entityRanges|data|2966349|entityMap^0|F|C|0^^$0|@$1|2|3|4|5|6|7|H|8|@$9|I|A|J|B|C]]|D|@]|E|$]]|$1|F|3|-4|5|6|7|K|8|@]|D|@]|E|$]]]|G|$]]

<code>mysqlhotcopy</code> might be an alternative for you too if you only have MyIsam tables.

blocks|key|5221884|text|使用索引，但不要太多，激活查询缓存，使用大型数据库的sphinx，这是一些很好的提示http://www.keedeo.com/media/1857/26-astuces-pour-accelerer-vos-requetes-mysql+(法语)|type|unstyled|depth|inlineStyleRanges|entityRanges|offset|length|data|5221885|entityMap|0|LINK|mutability|MUTABLE|url|http://www.keedeo.com/media/1857/26-astuces-pour-accelerer-vos-requetes-mysql^0|16|25|0|0^^$0|@$1|2|3|4|5|6|7|L|8|@]|9|@$A|M|B|N|1|O]]|C|$]]|$1|D|3|-4|5|6|7|P|8|@]|9|@]|C|$]]]|E|$F|$5|G|H|I|C|$J|K]]]]

Using indexes but not too much, activate query cache, using sphinx for big database, here is some good tips <a href="http://www.keedeo.com/media/1857/26-astuces-pour-accelerer-vos-requetes-mysql" rel="nofollow">http://www.keedeo.com/media/1857/26-astuces-pour-accelerer-vos-requetes-mysql</a> (In French)

blocks|key|3811781|text|另一种选择是http://www.mydumper.org+-多线程mysql备份/恢复，它比mysqldump快3到10倍，可以同时处理MyISAM和InnoDB以及http://vbtechsupport.com/1695/|type|unstyled|depth|inlineStyleRanges|entityRanges|offset|length|data|3811782|entityMap|0|LINK|mutability|MUTABLE|url|http://www.mydumper.org/|1|http://vbtechsupport.com/1695/^0|6|N|0|2C|U|1|0^^$0|@$1|2|3|4|5|6|7|N|8|@]|9|@$A|O|B|P|1|Q]|$A|R|B|S|1|T]]|C|$]]|$1|D|3|-4|5|6|7|U|8|@]|9|@]|C|$]]]|E|$F|$5|G|H|I|C|$J|K]]|L|$5|G|H|I|C|$J|M]]]]

Another alternative is <a href="http://www.mydumper.org" rel="nofollow">http://www.mydumper.org</a> - multi-threaded mysql backup/restore which is 3x to 10x times faster than mysqldump and can handle both MyISAM and InnoDB as well as Drizzle <a href="http://vbtechsupport.com/1695/" rel="nofollow">http://vbtechsupport.com/1695/</a>

Are there any documented techniques for speeding up mySQL dumps and imports?

This would include my.cnf settings, using ramdisks, etc. 

Looking only for documented techniques, preferably with benchmarks showing potential speed-up.

Speeding up mysql dumps and imports

翻译质量差，导致语言生硬或混乱。

没有提供实际的解决方法或示例。

解答不清晰，无法理解或解决问题。

页面排版不美观，阅读体验差。

文章

问答

视频

教程

学习中心

腾讯云实验室

直播

竞赛

腾讯云代码分析专区

腾讯iOA零信任安全管理系统专区

腾讯云架构师技术同盟交流圈

腾讯云数据库专区

腾讯云智能顾问专区

腾讯云原生专区

腾讯混元专区

腾讯云TCE专区

腾讯云Lighthouse专区

腾讯云HAI专区

腾讯云Edgeone专区

腾讯云存储专区

腾讯云智能专区

腾讯轻联专区 

腾讯云开发专区

TAPD专区

腾讯轻量云游戏服专区

腾讯云最具价值专家

腾讯云架构师技术同盟

腾讯云创作之星

腾讯云开发者先锋

腾讯云AI代码助手

云原生构建

TAPD 敏捷项目管理

Cloud Studio

SDK中心

API中心

命令行工具

功能1上新10个字符

功能2描述100个字符功能2描述100个字符功能2描述100个字符功能2描述100个字符功能2描述100个字符功能2描述100个字符功能2描述100个字符功能2描述100个字符功能2描述100个字符。

功能2上新100个字符功能2上新100个字符功能2上新100个字符功能2上新100个字符功能2上新100个字符功能2上新100个字符功能2上新100个字符功能2上新100个字符功能2上新100个字符。

功能5描述100个字符功能5描述100个字符功能5描述100个字符功能5描述100个字符功能5描述100个字符功能5描述100个字符

功能5上新100个字符功能5上新100个字符功能5上新100个字符功能5上新100个字符功能5上新100个字符功能5上新100个字符功能5上新100个字符功能5上新100个字符功能5上新100个字符功能5上新100个字符

功能4上新

文章&问答评论现已支持表情

全新交互，全新视觉，新增快捷键、悬浮工具栏、高亮块等功能并同时优化现有功能，全面提升创作效率和体验

社区富文本编辑器全新改版！诚邀体验～ 

精选全网热门MCP server，让你的AI更好用 🚀

💥开发者 MCP广场重磅上线！

涵盖代码开发、场景应用、自动测试全流程，助你从零构建专属AI助手

一站式MCP教程库，解锁AI应用新玩法

聚焦“写作效率、视觉美观与运行性能”三方面进行全面升级，为您提供更高效、稳定的创作环境

社区富文本&Markdown编辑器全新改版上线，欢迎大家体验!

诚挚邀请您参与本次调研，分享您的真实使用感受与建议。您的反馈至关重要，感谢您的支持与参与！

社区新版编辑器体验调研

是否有记录在案的加速mySQL转储和导入的技术？这将包括my.cnf设置、使用内存磁盘等。只寻找记录在案的技术，最好是具有显示潜在加速的基准测试。

问加速mysql转储和导入
EN

回答 9

Stack Overflow用户

Stack Overflow用户

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问加速mysql转储和导入EN

回答 9

Stack Overflow用户

Stack Overflow用户

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问加速mysql转储和导入
EN