【问题标题】:How to reference active delayed_job within the actual job如何在实际作业中引用活动的delayed_job
【发布时间】:2013-01-14 19:22:10
【问题描述】:

我正在研究一种显示延迟作业完成百分比的解决方案(使用延迟作业 gem)。目前,我的 delay_jobs 表的数据库迁移如下所示:

class CreateDelayedJobs < ActiveRecord::Migration
  def self.up
    create_table :delayed_jobs, :force => true do |table|
      table.integer  :priority, :default => 0      # Allows some jobs to jump to the front of the queue
      table.integer  :attempts, :default => 0      # Provides for retries, but still fail eventually.
      table.text     :handler                      # YAML-encoded string of the object that will do work
      table.text     :last_error                   # reason for last failure (See Note below)
      table.datetime :run_at                       # When to run. Could be Time.zone.now for immediately, or sometime in the future.
      table.datetime :locked_at                    # Set when a client is working on this object
      table.datetime :failed_at                    # Set when all retries have failed (actually, by default, the record is deleted instead)
      table.string   :locked_by                    # Who is working on this object (if locked)
      table.string   :queue                        # The name of the queue this job is in
      table.integer  :progress
      table.timestamps

    end

    add_index :delayed_jobs, [:priority, :run_at], :name => 'delayed_jobs_priority'
  end

  def self.down
    drop_table :delayed_jobs
  end
end

我在控制器方法中使用排队进程来处理延迟作业,并引用 lib/build_detail.rb 中的一个类:

Delayed::Job.enqueue(BuildDetail.new(@object, @com))

lib/build_detail.rb 文件如下:

class BuildDetail < Struct.new(:object, :com)

  def perform
    total_count = object.person_ids.length
    progress_count = 0

    people = com.person object.person_ids do |abc|
      progress_count += abc.size
      Delayed::Job.current.update_attribute :progress, (progress_count/total_count)
    end
  end  

end

Delayed::Job.current 不起作用。我看到 this posting 上提出的 Delayed::Job.current 方法,但是看起来该方法从未包含在主要的delayed_jobs github 项目中。

如何访问当前作业(从实际作业中),以在每次作业通过循环时更新进度字段?

【问题讨论】:

    标签: ruby-on-rails ruby-on-rails-3 delayed-job


    【解决方案1】:

    现在回答为时已晚,但我遇到了同样的要求,所以可能会对某人有所帮助。 您需要做的就是实现自定义作业和before-hook,您将在其中存储当前作业的参考:

    class MyTestJob
      def before(job)
        @job = job
      end
    
      def perform
        ...
        @job.update_attributes({ progress: your_progress_var }, without_protection: true)
      end
    end
    

    【讨论】:

    • 比“你需要做的一切”更详细的解释会有所帮助。
    • @IanLewis 因为它说您只需要创建自定义作业并覆盖 before 方法即可保存当前作业。就是这样
    • 谢谢@aray,我正在阅读“自定义工作”与“工作”不同。
    【解决方案2】:

    关于延迟工作的一个很酷的事情也是阻碍你的事情。当您将大量延迟的作业排队时,如果您有多个运行工作人员的实例,您可以并行处理它们 - 例如你可以让 10 台机器运行你的应用程序的一个实例来访问同一个数据库,并获得 10 倍的处理速度提升。因此,可能有多个“当前”工作。一次只运行一个作业是一种特殊情况。

    这是一种查看所有活动作业状态的方法。如果您只运行一个实例,它只会返回一个作业,这样就可以满足您的情况:

    active_jobs = Delayed::Job.where("progress > 0")
    progress_of_first_job = active_jobs.first.progress if active_jobs.present?
    progress_of_all_jobs = active_jobs.map{|job| job.progress}
    

    progress_of_first_job 是其中一个作业的进度(使用 order 子句以确保安全)。 progress_of_all_jobs 是每个活动作业的进度值数组(可能为空)。

    【讨论】:

    • 感谢您的 cmets 关于多个后台工作人员实例的好处。进度字段是我自己添加的,不是 Delayed_Job gem 原生支持的。我的挑战正是您所确定的 - 能够从指定作业本身的有效负载的代码中更新特定作业的进度。据我所知,原生的 Delayed_Job gem 没有这个功能。我知道 gem 有一些回调钩子,但没有任何东西可以促进进度条的创建。
    • 如果我能在延迟作业的有效负载创建过程中引用活动作业就好了。我一直在阅读有关 Resque 的信息,如果我无法获得延迟的工作以更新进度,我可能不得不走那条路。
    • 其实我看了一下Delayed::Job::Lifecycle这个类,貌似在workerjob中传递给处理方法。如果您将 perform 方法的签名重写为def perform worker, job,您应该能够访问作业对象并在那里写出进度。例如job.update_attribute :progress, 0.5
    • 嗯...我已经尝试过了,看起来不可能在 perform 方法中引用该作业。一些回调接受job 作为参数。奇怪 - 我认为这是 delayed_job 用户的一个相当普遍的请求。
    • 如果您无法完成这项工作,您可以在您的类中添加一个progress 列,或者添加一个包装类,该类具有您在 perform 方法中设置的progress。然后,您可以使用BuildDetail.where("progress &gt; 0") 来查找活跃的工作。
    猜你喜欢
    • 2011-03-19
    • 1970-01-01
    • 2015-10-06
    • 2011-04-13
    • 1970-01-01
    • 1970-01-01
    • 2016-05-03
    • 2015-01-17
    • 2011-10-12
    相关资源
    最近更新 更多