Railsでメモリを解放する方法

Question

現在railsで以下のようなバッチプログラムを使っていますが、メモリ使用量が多いです。

• データベースの数は1000ほど
• データベース文ループし、各データベースのデータを全て取得してcsvに書き出す

悩んでいる点としては、ループが進むほどメモリを圧迫していっている点です。
一つ前のループでのデータは不要なのでメモリに持っておく必要はないのですが、どうも自動でメモリから解放してくれないようです。

ここを参考に色々試してみたのですが、解放されてないっぽいです。
他の記事も調べましたが、解放を考えるより.all等を使わず.selectを使い使用するメモリを減らすような記事が多かったです。

現状メモリの容量内に収まっているので大丈夫ですが、今後を考えると改善しておきたいです。
皆様の知恵をお貸し下さい。

参考までに以下のようなコードです。（サンプルです）

# ここで全てのDBの名前を取得しています
db_names = db_names

db_names.each do |db_name|
　# ここでDBを切り替えています
  DatabaseChange(db_name) do
    Article.export_csv
  end
end

def export_csv
  # 実際にはもっと複雑な取得処理ですが割愛しています
  articles = Article.all
  # 以後export処理
end

Answer 1

データベースの数は1000ほど

1つ考えられる可能性として、「1000個のデータベースに対して、接続が開放されずに残っている」ということがあります。

DatabaseChangeの中身がわからないのでなんともいえませんが、データベースを使い終わったときにきちんと切断できているか確認が必要ではないかと思います。

Comments

[kuuritar]

なるほど。ありがとうございます。
こちらコネクションが残っているかどうか確認する方法はありますでしょうか？
ちなみにDBの変更はapartmentのgemを利用して、Apartment::Tenant.switch!を使って変更しています。