回答情况：
提问时间：
问题标签：
Derby是否具有从CSV执行数据批量插入的功能？我能想到的最好方法是逐行读取文件，创建一条批处理SQL update语句并运行该语句。对于100万行，需要30-40分钟，而使用mySQL的LOAD语句从CSV文件加载相同数据需要2-3秒
浏览 2修改于2013-09-03得票数 5
回答已采纳
我的后台处理是批量更新/插入数据。我需要将一些数据存储在临时表中，以便以后使用。我有5张临时桌子。如果使用临时表(CREATE #T)，则需要2-3秒，但如果使用TABLE变量(声明@T表)，则需要超过90秒。
浏览 2提问于2014-01-23得票数 6
回答已采纳
--恢复过程本身是否会生成事务日志(这里我指的是恢复过程生成的日志--如果有的话，而不是由正常的数据库DML/DDL操作生成)？为什么？在大容量恢复模式下，无论对A还是B的理解都是正确的(如果两者都不正确，请帮助纠正我，以下是我的两个不同的理解，使我感到困惑)
A.在产品数据库上正常的DML/DLL批量操作(而不是恢复操作)将生成最小数量的日志，因为日志是最小的，利用日志的恢复过程不能恢复批量操作中间的任何点；B.产品数据<
浏览 5修改于2010-01-26得票数 2
我可以用下面的代码在Python (2.7)的Sqlite3中进行非常高效的批量插入：我尝试过不同的代码变体。, data)我如何改进这段代码才能高效地进行大批量更新？
浏览 1修改于2017-05-23得票数 6
每一行代表订阅者数据。为正在处理的每一行创建一个subscriber对象，然后使用JDBC将该对象持久化到数据库中。PS:输入文件大约有1500万订户数据，应用程序大约需要10-12个小时来处理。我需要将这个时间减少到2-3个小时左右，因为这个任务是一个迁移活动，我们得到的停机时间大约是4-5个小时。但我也被要求进行一次批量更新。假设有50或100个工作线程的线程池，批量更新500-1000个订阅者。
我熟悉使用ExecuterServ
浏览 0提问于2016-06-15得票数 0
我有一个应用程序，我需要做批量数据插入。我读到spring data禁用了身份标识生成器的批量插入。我使用的数据库( MemSql )不支持序列生成，因为hibernate发出Select from seq for Update，而MemSql不支持select for update语句。有没有一种方法可以使用标识进行批量更新，或者应该使用基于Uuid的主键，或者是否有任何其他方法来创建主键id。
浏览 10提问于2021-06-21得票数 0
序列生成逻辑为max Sequence + 1，对于同一id的每一行，以sequence + 1的最大值生成序列。 所以我通过@Query with JPA实现了这个逻辑。但是批量插入没有发生。对于数据列表，需要在循环语句中逐个执行。 请帮我找出批量/批量插入的解决方案。nativeQuery = true)
Integer insertTable1(@Param("id") Integer id, @Param("name") Stri
浏览 47修改于2020-07-20得票数 0
在SQL Server中，我使用批量更新将多条记录插入到表中。如何取回批量更新后正在创建的ID(唯一主键)？例如，我有一个学生表，其中有角色NO和NAME。角色编号自动递增1，只要我使用java程序将名称插入数据库。我将使用我的java代码中的批量更新一次添加3行。在DB中，它被添加为2、3和4号角色。如何在我的java程序中获取这些新生成的ID，请帮助
在执
浏览 9修改于2014-05-29得票数 2
我需要解析一个非常大的文件，并将生成的实体存储在数据库中。我期望每个文件多达15万条记录，并乐于批量处理这些记录。
有没有办法用JPA批量插入播放实体？
浏览 2提问于2011-07-30得票数 5
回答已采纳
我有一个要求，如通过java从sql server数据库读取批量数据，并将其写入CSV。有没有使用相同的CSV导入数据到database.Is有一个选项与sqlserverbulkcopy类生成CSV文件？我们可以写普通的java代码来写CSV，但是我可能有大量的数据。我看到有一个从CSV读取和批量复制到数据库的选项。
浏览 12修改于2017-05-16得票数 0
使用来自C#的SQL Server2K8，我尝试对要优化的父/子表进行批量插入/更新记录。
插入/更新将自动生成一个键，我希望通过输出等将其提取出来，然后在域模型中重新分配。对于批量插入，我需要跟踪新生成的ID属于批量列表中的哪个域对象。我们是否可以依赖于从输出生成的插入到临时表中的顺序，或者传递一个在数据模型上设置的引用GUID，并临时传递给SQL以供参考？
浏览 0修改于2011-10-15得票数 2
回答已采纳
场景是，我们有多个数据生成器，它们将数据发送到AWS Kinesis firehose，后者被配置为将数据交付给AWS Elastic search。根据发生的不同编辑，多个数据生成器可能会将相同的数据发布到Kinesis firehose。由于Kinesis Firehose会缓冲请求，然后将其批量发送到ES，因此批量请求有可能对同一文档进行多次编辑。 如何确保只处理最新的文档？
浏览 41提问于2019-09-22得票数 1
回答已采纳
我有一些SQL Server Store Procs，可以为C# web应用程序中的图表生成统计数据。现在，web应用程序中的用户必须等待大约5分钟才能看到这些包含更新数据的图表，这对用户和我来说都是一件令人头疼的事情。有些Store procs需要超过5分钟的时间来生成数据，但web用户不需要在运行时查看信息。也许每2-3个小时更新一次图表。
所以，我不知道解决这个问题的最佳实践是什么。我在考虑创建一个windows服务，每隔2-3个小时就会调用SP，然后将数
浏览 0提问于2013-02-26得票数 1
回答已采纳
我正在寻找从Java应用程序执行批量插入数据库(例如Server 2012)的不同方法。我需要非常有效地将许多实体插入到数据库中，而不需要像有实体那样调用数据库。我的要求是执行实体的批量插入，其中数据库中的实体插入可能涉及将数据插入到一个或多个表中。以下是我所能想到的两种方法：
动态地生成一批SQL语句，并利用本地JDBC支持对数据库执行它。构造所有实体的XML表示，然后通过传递生成的XML来调用存储过程。存储过
浏览 5提问于2013-03-09得票数 5
1回答
我正在设计一个web应用程序，服务器生成批量数据，客户端定期检查是否有新的批量数据可供下载。我这样做的方式是，每当服务器生成新的一批数据时，它都可以在特定的URL上使用。这批数据采用JSON对象的格式。
由于我几乎没有web经验，所以当客户端访问URL时，我有点困惑。客户端如何知道URL处的批量数据是新的(在这种情况下，客户端应该下载它们)还是旧的(在这种情况下，客户端应该忽略它们，因为它过去已经下载过它们)？
浏览 1提问于2015-07-12得票数 0
数据库的大小约为20 of，大部分用于这两个表。每天，我们需要删除一些数据，即大约10M行。因此，我们使用批量删除将日志文件保持在一定的大小内。现在，我们将唯一的聚集索引转换为主键。删除2M行大约需要20-30分钟。
浏览 2提问于2012-07-19得票数 4
我的控制流任务如下所示：我的数据流任务如下所示：在从启用了CDC的表中获取数据时，我在使用OLE DB命令执行逐行更新时遇到了瓶颈。我希望能够以2-3分钟的间隔运行它，但我看到的运行时间约为1小时:(我听说有人使用临时表(OLE DB目标)，而不是在目标表上使用OLE DB命令。
这些中间临时表通常是如何设计的？它们是否与CDC表中的lsn条目重复，或者我是否将SQL命令插入到这些表中，以便稍后在控制任务中批量运行？如何将中间表中的更改应用于最终目标表？
浏览 18提问于2017-11-14得票数 0
我想使用批量插入在我的卡桑德拉性能的目的。我有10个抓取服务器，它们正在生成数据并将它们插入到主服务器中。我真正想做的是，不是直接插入数据库，而是每个grabber服务器收集数据并插入到主服务器一次。我不知道是批量插入还是批量插入，或者两者兼而有之。怎么做？
浏览 0提问于2014-03-10得票数 3
回答已采纳
我必须使用nhibernate和我的映射模型将数据批量导入我的数据库。我为ids设置了一个guid.comb生成器。有没有办法通过禁用临时guid.comb id生成器来导入尚未分配id的数据？
浏览 2修改于2017-07-13得票数 5
回答已采纳
我正在尝试实现一个Spring批处理作业，为了处理一个记录，它需要2-3个db调用，这减慢了记录的处理速度(大小为100万).If我使用基于块的处理，它将单独处理每个记录，并且在性能上会很慢。因此，我需要一次处理1000条记录，因为批量处理将减少数据库调用，并提高性能。
浏览 5提问于2021-05-28得票数 0
回答已采纳
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号