mysql备份批量处理 - 腾讯云开发者社区

文章/答案/技术大牛

发布

1回答

MySQL --“在复制数据库时必须增加指定的批量大小”

mysql、sqlyog

然而，今天我遇到了一个错误：“指定的批量大小必须增加”。我正在使用SQLYog。不幸的是，我真的不知道该如何处理这些信息。我试着查看代码，找出哪些mysql变量(比如bulk_insert_buffer_size)绑定到源代码中使用的变量，但是没有能够有效地遵循它。

浏览 0提问于2019-01-02得票数 0

回答已采纳

2回答

我可以备份mysql索引吗？在一张无害的桌子上？

mysql、backup

我有几个表，它们是成百万行的10's，并且有多个索引。当转储和重新加载数据时，需要很长时间才能重新插入索引，或者在没有索引的情况下插入，然后再重新索引。所需的功能:我可以转储原始数据，将其加载到顺序不间断的磁盘区域，然后只加载索引，并告诉引擎使用新的表开始位置进行更新。在搜索过这个之后，我什么也没看

浏览 0提问于2011-04-11得票数 1

回答已采纳

2回答

跟踪MySQL更改历史记录的简单方法？

mysql、sql、logging、redis、backup

我希望记录我的MySQL数据库中的所有更改(插入/更新/删除)。创建一个简单的文本文件并将SQL语句写入其中是一个好主意吗？或者，MySQL中是否有一些已经支持此功能的原生功能？或者这是我可以使用像redis这样的其他软件来创建更有效的解决方案的一种方式？

浏览 1提问于2013-12-23得票数 1

2回答

找出恢复模式的变化

sql-server-2014、backup、dmv、recovery-model

我想处理数据库被更改为简单，然后恢复到完整或批量日志恢复模型的实例。这是我的备份维护计划，因为很明显，下面的任何日志/差异备份都会失败。是否有任何可用于监测恢复模式更改的DMO？

浏览 0提问于2018-08-14得票数 0

回答已采纳

2回答

如何让mysql备份以特定字母开头的表？

mysql、phpmyadmin、backup、mysqldump、database-backups

我在mysql服务器上有2 gb的批量数据，我想得到它的备份。

浏览 7提问于2012-06-28得票数 1

回答已采纳

2回答

文件怎么批量下载？

备份

想备份一下文件找了半天只有批量上传没有批量下载文件如何批量下载

浏览 880提问于2016-10-27

2回答

如何通过phpmyadmin在MySQL数据库中存储大量数据？

mysql、phpmyadmin

我有大约4GB(34,000)的JPEG文件，我需要存储在MySQL表中。MySQL表具有以下模式ID、日期(用户端正在输入的日期)、文件名、类型、size.Is --在那里，我可以将这些文件(图像)按块而不是一个一个地上载。

浏览 3提问于2016-07-02得票数 0

2回答

联机(而不是批量处理)数据挖掘包

data-mining、online-algorithm

所谓“批量处理”，我指的是一个静态数据集--事实的(就像在CSV中一样)--一次性处理以提取知识。当“在线”时，它使用的是一个实时备份商店：事实在发生时被添加("X购买Y")，查询发生在这些实时数据上(“您会向正在查看y的人回复什么？”)。然而，我遇到的所有在线资源(例如，SO问题)都使在实时处理和批量处理数据挖掘包之间没有区别。我不得不逐个搜索：执行静态文件

浏览 3提问于2012-03-10得票数 2

回答已采纳

1回答

使用Hibernate和MySQL处理upsert的优雅方法

java、mysql、hibernate、bulkinsert、upsert

我目前正在开发一个基于Hibernate和MySQL的批量导入功能。我的目标是拥有几个表的Upsert功能。我发现自己正在编写大量代码来处理通过键检查行是否存在以及分支到正确方法的问题。我想知道是否有更好的方法，即类似于SQL-Server SSIS附带的工具，但用于Hibernate和MySQL。您使用了哪些工具或优雅的解决方案来处理hibernate和/或MySQL的批量Upsert？

浏览 1提问于2010-01-15得票数 3

回答已采纳

1回答

从mysql表中清除数据

mysql、archive、purge

我有一个cron设置，用于备份生产mysql表，并定期从表中清除数据。我必须删除ids引用的多个表中的数据。一些背景:我需要删除大约200万行，我的应用程序将不断地读/写到我的db(它通常不应该访问被删除的行) 我没有设置任何分区，是否会出现碎片问题？

浏览 2提问于2015-04-17得票数 2

2回答

server收缩事务日志

sql-server、sql-server-2008

我每天在我的表上测试批量插入一个正在进行的项目，批量文件每天大约有1200000条记录。事务日志不断增加。我有一次推卸了我的事务日志，它是9GB的，还没有备份。像这样缩小事务日志是否明智。是否可以在完全备份之后缩小日志，或者需要单独备份日志？谢谢

浏览 1提问于2014-04-08得票数 0

回答已采纳

1回答

在Informix数据库中批量插入Hibernate (获取sql日志跟踪)

hibernate、informix

我正在尝试在informix数据库中使用hibernate批量插入和更新。但是我不能发现插入是否真的是批处理的。是否有需要设置的属性来获取sql语句的日志。例如:在mysql中，我们使用的是profileSQL=true，我试着在连接的URL中设置SQLIDEBUG=filePath，但是文件不可读。有没有其他方法可以获取sql日志，以便我可以验证插入和更新是否成批处理。另外，哪个informix驱动程序版本会正确地批量插入和更新。在MySql中，我观察到MySql连

浏览 0提问于2017-10-05得票数 1

1回答

批量导出多个mysql数据库

shell、batch-file、ssh、mysqldump、database-backups

我正尝试在我的web服务器上备份我的15个MySQL数据库。这个数据库列表将随着我的不断增长(希望如此！)增加客户群。显然，我可以使用以下命令进行mysql转储：实际上

浏览 3提问于2013-05-12得票数 0

回答已采纳

1回答

使用appcfg.py/bulkloader.py和脚本进行远程备份。如何处理电子邮件/密码字段？

python、google-app-engine、bash

我正在尝试用python或bash编写一个脚本来执行bulkloader.py来备份appengine上的实体，但我不知道如何处理批量加载程序上的电子邮件和密码提示。

浏览 0提问于2011-06-23得票数 1

回答已采纳

2回答

应用程序引擎:将实时数据存储复制到本地开发数据存储(仍可用)

google-app-engine、google-cloud-storage、google-cloud-datastore

以前可以通过批量加载程序下载并上传到本地开发服务器。然而，由于不支持oauth2，批量加载器下载已经几个月不起作用了。一些地方建议从云存储备份下载，并通过批量加载程序或直接解析备份上传到本地数据存储。然而，这两个似乎都不再起作用了。bulkloader方法抛出：而用于读取备份文件的RecordsReader类在尝试读取第一条记录时到达文件末尾

浏览 0提问于2016-05-06得票数 1

1回答

mysql批量处理数据

php、mysql、bulk

我有一个包含三个表的MYSQL DB我需要处理表1，以便检查每个记录类别和子类别，从类别和子类别表中获取文本名称引用，并将输出放入表1中的一个新字段中。

浏览 1提问于2013-08-04得票数 0

1回答

通过FTP复制MySQL数据库(FileZilla、Ubuntu、Zabbix)

ubuntu、backup、mysql、ftp、zabbix

我最近发现我们没有备份我们的Zabbix数据库，我想知道是否可以通过FTP在FileZilla上通过从mysql目录复制文件来进行备份？从长远来看，我们将有一个脚本来正确地处理这个问题，但我想确保我们能够尽快完成备份，以防出现任何问题！(我相信这将是最快的方法，但我不太熟悉Ubuntu和Zabbix.)通过FTP备份的原因是备份不会存储在服务器上，我想把它移到别处

浏览 0提问于2018-02-23得票数 0

2回答

C语言中的MySQL批处理更新

mysql、c

MySQL的C API是否支持批量更新？我正在编写一个应用程序，其中某些事务是以大批量处理的。如果在日志记录过程中，我最终为每个insert执行一次call DB，那么效率将非常低下。C有没有类似于Java的用于批量SQL更新的API？N.

浏览 2提问于2009-03-20得票数 1

2回答

我们如何采取转储与批记录选项？

mysql、backup、mysql-5.5、mysqldump

我们有30 GB的database.we想要备份这个数据库。如何使用mysqldump进行批量记录备份

浏览 0提问于2013-06-20得票数 0

回答已采纳

1回答

如何用小批量梯度下降来更新神经网络中的权重？

machine-learning、neural-network、gradient-descent、backpropagation

我把它交叉发到cross.validated上，因为我不知道它在哪里最合适时代开始了。我们只对一个小型批次进行采样和前馈，得到误差并备份它，即更新权重。时代结束了。时代开始了。我们对一个小批量进行采样和前馈，得到误差并备份它，即更新权重。我们对一个小批量进行采样和前馈，得到误差并进行存储。我们重复这样做，直到我们对完整的数据集进行采样。我们以某种方式对错误进行平均，并通过更新权重来支持它们。时代结束了。

浏览 0提问于2015-12-14得票数 5

回答已采纳

点击加载更多