【ruby on rails】SideKiqでループするジョブを非同期で行いたい

Question

環境

rails: 5.2.0
ruby 2.5.1
sidekiq
activejob

課題

ruby on rails で無限に続くjobを2つ、非同期でうごかそうと思い、以下のようなコードを組み、activejob経由のsidekiqで動かしました

    class TestJob < ApplicationJob             
      queue_as :default                            
                                                   
      def perform(id)                              
        # Do something later                       
        while true do                              
            sleep 2                                
            p "infinite comment #{id}"             
        end                                        
      end                                          
    end 

sidekiq,redis-server rails server起動後、rails consoleから以下コマンドで、２つjobを起動しました

TestJob.perform_later(1)
TestJob.perform_later(2)

sidekiqのダッシュボード上では、２つのタスクが実行中になっていたのですが、sidekiqの起動画面には１つめのタスクに相当するコメントinfinite comment 1しかでておらず、ただしく実行されていないようです。

２つのタスクが同時に動くようにするにはどのような変更をしたらよいでしょうか？

sidekiq,activejobなどを使うのは今回が初めてなので、足りない情報があれば指摘していただけると幸いです

よろしくお願いいたします。

Answer 1

sidekiqは複数のworkerプロセスが実際のジョブの処理を担当するので、
無限ループするジョブを用いた場合は、workerの数を2つ以上用意しない限りは、2つ目のジョブに順番が回ってこないのではないでしょうか。
sidekiqのworker数(= concurrencyという設定項目だったような…)を増やせば動きはすると思います。

ただ、余談ですが、ジョブの中身で無限ループをするのは、設計として良いものかは疑問です。
この手法では、sleepしたとしても、その間に別のjobが走ってくれるわけではないので、CPUが有効に使われるわけでもなく、
かつ、ジョブのパフォーマンス測定(=ジョブの終了時間とか、エラー率を見たりとか)など、実運用でよくあるパターンをこなせない気がするからです。

ループの中身を1つのjobとして、前のjobが終了したら次のjobを発行する、などのほうが良いような気がします。

Comments

[FumiakiNakao]

workerを複数用意することで動きました

また、運用に関するご意見も参考にして、やり方を見直してみようと思います！