在 Heroku 上运行长轨道控制台或 rake 任务

Question

我的 rails 应用程序托管在 Heroku 上。 我正在尝试使用简单的循环处理我的 postgresql DB 中的数据

  DocumentText.all.each do |t|
    if is_number? t.src
      puts t.src
      t.targ = t.src
      t.save
    end
  end

我遇到的问题是我的rails控制台将在运行我的一些记录（不是全部）后退出。我已经尝试将其作为一个rake任务但同样的问题。

为什么会发生这种情况，我有什么选择？

Answer 1

在您的代码片段中，您正在对数据库运行 n 个更新查询，这将花费大量时间，这就是您的任务未完全运行的原因。

我建议对数据库运行单个更新查询。 为此，在您的 Gemfile 中添加以下 gem

gem 'activerecord-import'

documents = []
DocumentText.all.each do |t|
  documents << t if is_number?(t.src)
end


# MySQL version
DocumentText.import(documents, on_duplicate_key_update: {targ: :src})

# PostgreSQL version (no shorthand version)
DocumentText.import([book], on_duplicate_key_update: {
  conflict_target: [:id], columns: {targ: :src}
})

这应该可以解决问题。 如果您有数百万的数据，那么我还建议您分批运行此过程。 如果您需要帮助，请告诉我。

Answer 2

@Pradeep Agrawal 的回答让我找到了使用 activerecord-import gem 的解决方案（他的回答是从 gem 复制和粘贴并包含错误）。

documents = []
DocumentText.all.each do |t|
  if is_number?(t.src)
    documents << t
  end
end

DocumentText.import(documents, on_duplicate_key_update: {
  conflict_target: [:id], columns: {targ: :src}
})