yieldとreturnの違いと使い分けについて

Question

以下、同一ファイルになります。
http requestのcurlコマンドで複数のユーザを送り、下記コードのexusersに入ります。
そこでfor文でDBにすでに存在しないかどうかをチェックするコードになります。

下記、origin_output関数内でなぜyieldでいけないかの理由が思いつきません。yieldは、一時的にメモリに値を保存してステータスを維持しながらfor文が処理されるという認識です。
しかし、そんなに重要な気がしていないのでどなかた、メリット及び使いわけについてアドバイスお願いできませんでしょうか ？

def json_output(status, exuser, ac):

    if status == 0:
        list = {"exuser": exuser, "ac": ac}
        r = {"code": 200, "body": list}
    else status == 1:
        r = {"code": 422,
                "body": {"code": 422, "error": "Duplicated" + " "}}
    return r


def origin_output(exusers, cid):

    allids = []
    db_ids = get_exids(cid)
    for user in exusers:
        ac = None
        if user in ids:
            status = 1  
        else:
            status = 0  
            allids.append(user)
            ac = insert_ac(cid, user)
        yield json_output(status, user, ac)

Comments

[yohhoy]

「origin_output関数内でなぜyieldでいけないか」とはどのような意味でしょうか？yieldを使うのが望ましい設計か否かというニュアンスですか？

[sequelanonymous]

はい、そうです。

[yohhoy]

yield（ジェネレータ）とするかreturn（通常関数）とするかは動作要件次第ですが、レビュー等で指摘されたということでしょうか？端的に回答するなら「全数列挙を遅延評価したいか？」に尽きます。

[sequelanonymous]

指摘とかではなく、単純にyieldとreturnの使い分けを把握したいです。「全数列挙を遅延評価したいか？」の理由はなんでしょうか？どんな時に遅延評価すべきか否かが気になっています。yieldを使うと全数列挙を遅延評価できるのは知っています。

Answer 1

リストを返す関数として設計した場合、呼んだ瞬間にDBが「うにゃーん」と総なめにされそうです。それを嫌ったのかも知れません（あまり深く検討していませんが）。

---

for x in リストを返す関数():
    xを用いて何らかの処理  # これに取り掛かれるのは「リストを返す関数」の呼び出しが返ってから

for x in ジェネレータ:
    xを用いて何らかの処理  # 最初の1件が返ればとりあえず処理を始められる

これでトータルの処理時間は変わらないと推察されますが、「ぜんぶの情報は要らないので速く次に行ってくれ」という状況（breakが入るようなコード）とか、並行処理やI/Oが絡むような状況では有用でしょう。

Answer 2

何をしたいのかによりますが、yieldはジェネレーターを返しませんか？

---

ちょっとわかりやすい気がする無限ループ。

def f(n):
    c = 0
    while True:
        c += 1
        yield c
        if c > n:
            c = 0

if __name__ == '__main__':
    n = 10
    g = f(n)
    while True:
        print(next(g))

Comments

[sequelanonymous]

はい、それは知ってます。
別にyieldでもreturnでもこのコードではいいと思ってます。しかし、あえてyield じゃなきゃダメ理由、もしくは、yieldの方がいい理由が気になっています。

[mkgrei]

遅延評価をすればメモリを温存できます。

速度はそれほど変わらないかも知れません。swapが発生しなければ。

[sequelanonymous]

メモリが温存できるというメリットのみしかないのでしょうか？

[mkgrei]

hayataka2049さんの回答とも重なるところがあるかも知れませんが、パイプラインなどの場合も有用です。
物理筐体をまたがった非同期並列処理などですね。

逐次処理は全てが終わる前から、次の処理に移れます。

極端な例だと無限ループを回す場合などです。
循環する数列に対して処理を行い続ける場合など、最初に配列を準備することができません。
配列でやろうとすると、一部準備して処理して次、みたいなロジックになってしまいます。
yieldを使うと少しだけすっきり組めます。

並列計算のスケジューラなども同様ですが、普通はキューを使うでしょうね。

ただこのような使い方は一概にうまくいくとは言えず、メモリが温存できる、というようなはっきりとした利点としてはあげにくいかと思います。