【发布时间】:2018-09-27 16:07:34
【问题描述】:
Sidekiq 一直在处理工作(一夜之间完成了 30 个工作)。今天早上,它完全关闭了处理队列(现在多达 28 个作业)。
在 Heroku 上运行(1 个 Standard-2x Web Dyno,1 个 Standard-1x Worker Dyno)。
Procfile(我最难找到要配置的文档)
web: bundle exec puma -C config/puma.rb
worker: bundle exec sidekiq -e production -C config/sidekiq.yml
sidekiq.yml
development:
:concurrency: 5
production:
:concurrency: 20
:queues:
- ["default", 1]
- ["mailers", 2]
sidekiq.rb
if Rails.env.production?
Sidekiq.configure_client do |config|
config.redis = { url: ENV['REDIS_URL'], size: 2 }
end
Sidekiq.configure_server do |config|
config.redis = { url: ENV['REDIS_URL'], size: 20 }
Rails.application.config.after_initialize do
Rails.logger.info("DB Connection Pool size for Sidekiq Server before disconnect is: #{ActiveRecord::Base.connection.pool.instance_variable_get('@size')}")
ActiveRecord::Base.connection_pool.disconnect!
ActiveSupport.on_load(:active_record) do
config = Rails.application.config.database_configuration[Rails.env]
config['reaping_frequency'] = ENV['DATABASE_REAP_FREQ'] || 10 # seconds
# config['pool'] = ENV['WORKER_DB_POOL_SIZE'] || Sidekiq.options[:concurrency]
config['pool'] = 16
ActiveRecord::Base.establish_connection(config)
Rails.logger.info("DB Connection Pool size for Sidekiq Server is now: #{ActiveRecord::Base.connection.pool.instance_variable_get('@size')}")
end
end
end
end
此外,队列中的所有作业(默认为邮件程序)是否可以让 Sidekiq 强制运行作业?
更新
我已将错误范围缩小到 Heroku 工作人员。重启后,worker 迅速崩溃。
第一个错误与 Sidekiq 没有产生足够的连接有关(Redis 需要 22,我已将限制设置为 20)。
现在,我收到以下错误:
Is the server running locally and accepting connections on Unix domain socket "/var/run/postgresql/.s.PGSQL.5432"?
我正在通过 Heroku 运行 PG Hobby。它的连接限制是 20。这是问题的根源吗?
【问题讨论】:
-
关于“是否可以让 Sidekiq 强制运行作业?”,是的,可以检查队列以及 Sidekiq 监视器上正在处理的内容:github.com/mperham/sidekiq/wiki/Monitoring
-
@AndreDurao 监控仅提供删除排队作业的选项。例如,在邮件中,我想强制运行该作业。
-
您是否尝试重新启动工作器? devcenter.heroku.com/articles/…
-
@AndreDurao 是的。作业仍在排队中。
-
@AndreDurao 看到上面的更新。结果发现工人经常崩溃。
标签: ruby-on-rails ruby sidekiq