rubyのThreadで大量のIntergerを渡すと固まる

Question

こんにちは。

rubyのThreadsで色々と実験しています。

固まることが多いのですが、これはなぜですか？

class Slack
  def initialize(names)
    @names = names
  end

  def list
    threads = []
    @names.each do |name|
      threads << Thread.new do
        3.times do |i|
          puts "#{name}:#{i}"
        end
      end
    end
    threads.each { |t| t.join }
  end
end

names = %w(foo bar baz)
Slack.new(names).list
=>
baz:0
baz:1
baz:2
bar:0
foo:0
foo:1
foo:2
bar:1
bar:2

こちらはうまくいきます。

Slack.new([*1..10000]).list
=>
can't create Thread: Resource temporarily unavailable (ThreadError)

大量の処理をさせたいのに、エラーになってしまいます。

threadsを10,000個作成しているのは多すぎなのでしょうか？

その場合、上限値はどこを見て判別するのでしょうか？

よろしければ教えてくださいm(_ _)m

Answer 1

スレッド数の限界はRubyではなく実行環境依存です。OSおよびOSの設定によって最大スレッド数が決まっており、それを越えて作成するとエラーになります。以下一般的なLinuxの場合について、確認すべき所を記述します。OSによっては調べるところが異なりますので、ご注意ください。

1. /proc/sys/kernel/threads-maxの値を確認してください。それが、システム全体の最大スレッド数です。sysctl -w kernel.threads-max=XXで数値を上書きするか、起動時の値は/etc/sysctl.confで設定できます。
2. ulimit -aの結果を確認してください。色々制限値がありますが、そのどれかが引っかかっている可能性があります。

なお、私の手元(Mingw64版Ruby、Bash on Ubuntu on Windows版Ruby、CentOS版Ruby)で試す限り、エラーになりませんでした。

Comments

[ayu]

raccyさん

返事が遅くなりましたが、ありがとうございました！

実行するOSに依存するものだったのですね。

言われてみると、threadは言語機能ではなく、OS側の機能を使っていますね。