APIモードでのN+1問題

Question

APIモード初挑戦です。

APIモードで、N+1問題を発見、対処するには一般的にどのような手法がとられるのでしょうか？
定番のBulletをみると、Run in testsがあるので、こちらを利用する形なのでしょうか？

---

N+1問題について説明不足でした。

N+1 問題とは、OR マッパーを使用しているときに発生しがちな問題です。

何かの一覧画面を作成しているときに、

・一覧に表示するデータを取得するために SELECT を 1 回実行（N レコード返される）
・各データの関連データを取得するために SELECT を N 回実行
・データベースアクセス（SELECT）が合計 N+1 回も実行される（JOIN して 1 回の SQL で取得した方が効率的）
というものです。

参考：Railsライブラリ紹介: N+1問題を検出する「bullet」

Comments

[y_waiwai]

N+1問題ってのはなんのことでしょうか

[no1knows]

失礼しました。追記させていただきましたが、Railsを使っているとよくあるのですが、ループ処理の中で都度SQLを発行してしまい、大量のSQLが発行されてパフォーマンスが低下してしまう問題のことです。

Answer 1

Railsの場合、一般的にはeager_loadを使いN+1問題を潰します。
ただ、質問者さんのコードがないのでなんとも言えないですが、単純な絞り込みに関してのみ有効です。

User.eager_load(:posts)

上記の例ではusersテーブル、postsテーブルがあり、Userモデルに has_many :posts と定義している場合のサンプルコードです。

INNER JOINにしたいのか、LEFT JOINにしたいのかは不明ですが、目的はとりあえず達成できると思います。

※複雑なサブクエリ等を使ったものは検索対象のPKのみをSELECTして詳細な情報はIN句を利用して取得する等の工夫が必要です。（もしくはSQLを直接実行してしまったほうがいいケースもあります）

Comments

[no1knows]

N+1問題を対処する方法についての説明ありがとうございます。

質問にある「APIモードで、N+1問題を発見、対処する」の「APIモードで、N+1問題を発見」するにはどうすればよいのでしょうか？

[deo_deo]

失礼しました。「N+1問題を解決する」と読み間違えてました。
発見するのであれば仰る通りBulletを使うのが定番だと思いますが、APIモードであればテストコードを書く必要があります。
ちょっと投げやりですが、以下の記事があるので共有しておきます。
https://qiita.com/Oakbow/items/d0242a62a7568fea80ed

あとはgemを使わないのであれば、地道に開発中にログを見ながら開発する事でしょうか。
もしくは、ログファイルをご自身で解析するスクリプトを作成してみてはいかがでしょうか。
結局、N+1はほぼ同じSQLが連続で発行されるので、正規表現を使えば割と簡単に検出できると思います。

質問者さんの開発環境が不明ですが、私であれば、開発中は常に tail -f log/development.log でログを見ながら開発しています。
APIモード時の場合はChromeの拡張機能を使ってREST Clientツールを使ってリクエストを送信しています。
複数人開発で阻止したい場合はテストコード一択でしょう。

[no1knows]

ありがとうございます！
ログを見ながらの開発は見落としが心配なのと、テストコードも最低限であれば簡単に実装できそうなのでBulletを使ってみようと思います。
https://qiita.com/k-penguin-sato/items/defdb828bd54729272ad
RestClientツール、僕はPostmanを利用していますが、Chromeの拡張でも可能なのですね。