回答情况：
提问时间：
问题标签：
我已经开发了ADF DI excelsheet通过它上传批量数据。但是，虽然我保存它上传1000个数据，但它需要大量的时间，近35分钟。 我已经尝试将批量大小从500减少到50，然后是10。我试着从excel表格中生成日志文件来监控这个过程。在这种情况下，在批处理71提交之后存在日志暂停。 这里处理了批次71 - 10 * 71 = 710个数据。它可以是错误常量，也可以是成功。
浏览 18提问于2020-04-29得票数 0
我想使用批量插入在我的卡桑德拉性能的目的。我有10个抓取服务器，它们正在生成数据并将它们插入到主服务器中。我真正想做的是，不是直接插入数据库，而是每个grabber服务器收集数据并插入到主服务器一次。我不知道是批量插入还是批量插入，或者两者兼而有之。怎么做？
浏览 0提问于2014-03-10得票数 3
回答已采纳
--恢复过程本身是否会生成事务日志(这里我指的是恢复过程生成的日志--如果有的话，而不是由正常的数据库DML/DDL操作生成)？为什么？在大容量恢复模式下，无论对A还是B的理解都是正确的(如果两者都不正确，请帮助纠正我，以下是我的两个不同的理解，使我感到困惑)
A.在产品数据库上正常的DML/DLL批量操作(而不是恢复操作)将生成最小数量的日志，因为日志是最小的，利用日志的恢复过程不能恢复批量操作中间的任何点；B.产品数据<
浏览 5修改于2010-01-26得票数 2
我有一个应用程序，我需要做批量数据插入。我读到spring data禁用了身份标识生成器的批量插入。我使用的数据库( MemSql )不支持序列生成，因为hibernate发出Select from seq for Update，而MemSql不支持select for update语句。有没有一种方法可以使用标识进行批量更新，或者应该使用基于Uuid的主键，或者是否有任何其他方法来创建主键id。
浏览 10提问于2021-06-21得票数 0
我正在使用SQL Loader加载大量数据。当业务应用程序填充表时，将以编程方式生成键。ID EXPRESSION (random number creation expression), age number所以从数据文件中Mary, 5719287398 J
浏览 1修改于2018-01-25得票数 0
序列生成逻辑为max Sequence + 1，对于同一id的每一行，以sequence + 1的最大值生成序列。 所以我通过@Query with JPA实现了这个逻辑。但是批量插入没有发生。对于数据列表，需要在循环语句中逐个执行。 请帮我找出批量/批量插入的解决方案。nativeQuery = true)
Integer insertTable1(@Param("id") Integer id, @Param("name") Stri
浏览 47修改于2020-07-20得票数 0
我使用ADF复制活动将数据从多源SQL表移动到不同的Target SQL表中。这是对每个活动使用的并行循环迭代。但是，当它启动时，每个复制活动都会在后台生成多个会话(8-10个会话)。我不使用复制活动的任何并行/并发/批量复制设置。请帮助我为什么要创建这个会议？
浏览 10提问于2022-11-29得票数 0
在SQL Server中，我使用批量更新将多条记录插入到表中。如何取回批量更新后正在创建的ID(唯一主键)？例如，我有一个学生表，其中有角色NO和NAME。角色编号自动递增1，只要我使用java程序将名称插入数据库。我将使用我的java代码中的批量更新一次添加3行。在DB中，它被添加为2、3和4号角色。如何在我的java程序中获取这些新生成的ID，请帮助
在执
浏览 9修改于2014-05-29得票数 2
我需要解析一个非常大的文件，并将生成的实体存储在数据库中。我期望每个文件多达15万条记录，并乐于批量处理这些记录。
有没有办法用JPA批量插入播放实体？
浏览 2提问于2011-07-30得票数 5
回答已采纳
我有一个java jpa/hibernate应用程序，它需要获取大量数据来执行其任务。批量大小:0- sqls发送: 14000 -时长:约1分钟批量大小: 10 - sqls发送: 2700 -持续时间:约5分钟
批量大小我用log4jdbc记录了生成的sql。我注意到每个批处理语句之间的间隔约为100-150毫秒。如果我稍后运行sql，则每个语句的运行时间不超过20毫秒。
浏览 0修改于2012-06-01得票数 4
回答已采纳
我必须在数据库中插入10万条记录。因为我使用标识作为主要的生成策略，所以我不能在hibernate中进行批量插入。我尝试了StatelessSession，但没有获得任何性能。
浏览 2修改于2012-12-25得票数 1
回答已采纳
我有一个特定的情况，我想知道hibernate是如何使用它的模式元数据来生成HQL的，或者如果需要的话。
因此，我遇到了需要将对象图更新到DB的情况，问题是只需要更新具有非空(或非默认值)值的字段。这是我的用例:我们有一个批量编辑功能，允许我们的后端支持团队能够为特定产品更新大约25-30个字段。因此，它们提供了产品id，并且需要更新列的值。因此，我们希望转到生成sql查询，然后运行批处理更新(即使这意味着直接在SQL中运行它们)。然而，我想知道的是，hibernate已经巧妙地使用元数据来生成<
浏览 1提问于2012-05-04得票数 1
我正在尝试读取CIFAR10数据集，这些数据集是从>分批给出的。我试图把它放在一个数据帧使用泡菜和读取‘数据’的一部分。但我得到了这个错误。most recent call last)----> 1 unpickle('datasets/cifar-10encoding ='bytes')
----> 5
浏览 5修改于2016-05-30得票数 4
回答已采纳
我有一个数据组成的每日数据跨多个专栏；01/01/2020 12 3 2 1 03/01/2020 45 41 3..数据是自动生成的，但我可以按月或日期覆盖数据。我知道像这样的东西可以重置一个值，但是否存在按月或两个特定日期批量进行的？
df.set_value(
浏览 2提问于2020-09-18得票数 1
回答已采纳
1回答
我有一个列表，例如有101条记录，我想批量发送10条记录的数据。list.grouped( 10 )将返回10条记录的列表和1条记录的列表。我希望将所有10个列表和10个记录发送到futureSend方法，并希望从中获取包含一条记录的列表(如果在此场景中存在，但如果列表有100条记录，则返回空列表)以供理解。val listRes = list.grouped(10)
list <- listRes
浏览 7提问于2020-04-19得票数 0
我有一个要求，如通过java从sql server数据库读取批量数据，并将其写入CSV。有没有使用相同的CSV导入数据到database.Is有一个选项与sqlserverbulkcopy类生成CSV文件？我们可以写普通的java代码来写CSV，但是我可能有大量的数据。我看到有一个从CSV读取和批量复制到数据库的选项。
浏览 12修改于2017-05-16得票数 0
使用来自C#的SQL Server2K8，我尝试对要优化的父/子表进行批量插入/更新记录。
插入/更新将自动生成一个键，我希望通过输出等将其提取出来，然后在域模型中重新分配。对于批量插入，我需要跟踪新生成的ID属于批量列表中的哪个域对象。我们是否可以依赖于从输出生成的插入到临时表中的顺序，或者传递一个在数据模型上设置的引用GUID，并临时传递给SQL以供参考？
浏览 0修改于2011-10-15得票数 2
回答已采纳
场景是，我们有多个数据生成器，它们将数据发送到AWS Kinesis firehose，后者被配置为将数据交付给AWS Elastic search。根据发生的不同编辑，多个数据生成器可能会将相同的数据发布到Kinesis firehose。由于Kinesis Firehose会缓冲请求，然后将其批量发送到ES，因此批量请求有可能对同一文档进行多次编辑。 如何确保只处理最新的文档？
浏览 41提问于2019-09-22得票数 1
回答已采纳
我正在寻找从Java应用程序执行批量插入数据库(例如Server 2012)的不同方法。我需要非常有效地将许多实体插入到数据库中，而不需要像有实体那样调用数据库。我的要求是执行实体的批量插入，其中数据库中的实体插入可能涉及将数据插入到一个或多个表中。以下是我所能想到的两种方法：
动态地生成一批SQL语句，并利用本地JDBC支持对数据库执行它。构造所有实体的XML表示，然后通过传递生成的XML来调用存储过程。存储过
浏览 5提问于2013-03-09得票数 5
1回答
我正在设计一个web应用程序，服务器生成批量数据，客户端定期检查是否有新的批量数据可供下载。我这样做的方式是，每当服务器生成新的一批数据时，它都可以在特定的URL上使用。这批数据采用JSON对象的格式。
由于我几乎没有web经验，所以当客户端访问URL时，我有点困惑。客户端如何知道URL处的批量数据是新的(在这种情况下，客户端应该下载它们)还是旧的(在这种情况下，客户端应该忽略它们，因为它过去已经下载过它们)？
浏览 1提问于2015-07-12得票数 0
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号