首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >在Rails 5中使用bulk_import时在before回调之后触发

问在Rails 5中使用bulk_import时在before回调之后触发
EN

Stack Overflow用户
提问于 2021-10-06 12:35:14
回答 2查看 180关注 0票数 0

我想插入数以百万计的数据,并且没有多次命中数据库的选项,使用此gem来执行批量插入,但正如它所说的,它只是执行批量插入,并且没有内存中的Activerecord对象,它不能在保存回调之前和之后运行。

因此,为了做到这一点,我编写了一个代码来手动触发before_callback。

代码语言:javascript
复制
valid_books = []
invalid_books = []

books.each do |book|
  if book.valid?
    valid_books << book
  else
    invalid_books << book
  end
end

valid_books.each do |book|
  book.run_callbacks(:save) { false }
  book.run_callbacks(:create) { false }
end

Book.import valid_books, validate: false

引用自gem文档本身。在导入数据之后,我如何在回调之后运行。谢谢!

EN

回答 2

Stack Overflow用户

发布于 2021-10-06 13:35:35

当我们有before和after回调时,bulk_import是没有帮助的。

要么必须为每个插入的记录调用after_callbacks,要么使用接受批量数据的.create。

代码语言:javascript
复制
Ex: Model.create({{...}, {...}, {...} ...})

建议您在后台作业中创建记录:

Job1

  1. 将batch_import
  2. Parse数据的ActiveJob设置为JSON。批处理Ex - data_hash: {{...}, {...}, {...} ...}
  3. Split数据,并循环通过每个批处理
  4. 调用Job2(batch_data)

Job2

  1. Setup an ActiveJob for batch_create purpose
  2. Have a DB.Transaction block
  3. Do Model.create(batch_data)
  4. Wrap上述步骤在<代码>D35block

<代码>G237

使用该的

您将以expected

  • Have身份调用validations & callbacks多个工作进程完成在expected

  • Have中创建记录的任务可以在rescue block中设置异常跟踪器以通知有关错误的信息

建议

对于Redis

  • Errbit Exception management and
  • Airbrake tracking Exceptions

    ,如果您使用的是Postgres DB,则我重新注释Que.

  • Widely used queues are backed backedQue.
  • Widely Exception management
票数 1
EN

Stack Overflow用户

发布于 2021-11-12 20:41:48

如果你使用的是Postgres,你可以在导入步骤之后添加这个步骤,以便在回调之后运行:

代码语言:javascript
复制
Book.import valid_books, validate: false

valid_books.each do |book|
  book.run_callbacks(:save) { true }
  book.run_callbacks(:create) { true }
end
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/69465819

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档