Beautifulsoupで抽出したデータを辞書型として追加したい

Question

前提・実現したいこと

次のようなコードを辞書型として次のようなCSVファイルで出力したいと思っております。
下記のようなコードを作成したのですが、printで表示するとうまく対象全部が抽出されるのですが、いざ辞書型としていれると、最後の一つ（ここでいうキモリ）しか抽出できません
対象すべてを辞書型として格納し、CSVファイルで抽出する方法についてご教授ください。

|ポケモン|ランク||
|:--:|:--:||
|アチャモ|なし||
|ミズゴロウ|A||
|キモリ|B||
||||

該当のソースコード

soup = BeautifulSoup(page_source,"lxml")
detail = {}
for pokemon in soup.find_all("div", attrs={"class": "ttl-result-area"}):
    name = pokemon.find("span",attrs={"class": "horizontal-rhythm"}).text.strip()
    ranks = pokemon.find_all("span",attrs={"class": "lbl-ipo-decline"})
    if len(ranks)>0:
      rank = ranks[0].text
    else:
      rank = "なし"
    print(f"ランク={rank},ポケモン={name}")
    detail['ポケモン'] = name
　　detail['ランク'] = rank

#printの結果
ランク=なし,ポケモン=アチャモ
ランク=A,ポケモン=ミズゴロウ
ランク=B,ポケモン=キモリ

#detailの結果
{'ポケモン': 'キモリ', 'ランク': 'B'}

追加のソースコード

for pokemon in soup.find_all("div", attrs={"class": "ttl-result-area"}):
    detail = {}
    name = pokemon.find("span",attrs={"class": "horizontal-rhythm"}).text.strip()
    ranks = pokemon.find_all("span",attrs={"class": "lbl-ipo-decline"})
    detail = {}
    if len(ranks)>0:
      rank = ranks[0].text
    else:
      rank = ""
    print(f"rank={rank},name={name}")
    detail['ポケモン'] = name
    detail['ランク'] = rank
#detailの結果
{'ポケモン': 'キモリ', 'ランク': 'B'}

補足情報（FW/ツールのバージョンなど）

わかりづらいところばかりですが、質問いただければできるだけ早めに返答いたします。

Answer 1

ひとつのポケモンデータがひとつの辞書に対応しているようですので、
すべてのポケモンのデータを入れるリストを用意して、そこにポケモンデータを追加していきます。

import csv

pokemons = []  # すべてのポケモンのデータを入れるリスト
for pokemon in soup.find_all(...):
    ...
    detail = {}  # これは for ループの中に入れる
    detail['ポケモン'] = name
    detail['ランク'] = rank
    pokemons.append(detail)

with open('pokemons.csv', 'w') as f:
    writer = csv.DictWriter(f, ['ポケモン', 'ランク'])
    writer.writeheader()
    writer.writerows([pokemon for pokemon in pokemons])

$ python3 -q
>>> import csv
>>> pokemons = []
>>> detail = {}
>>> detail['ポケモン'] = 'アチャモ'
>>> detail['ランク'] = 'なし'
>>> pokemons.append(detail)
>>> detail = {}
>>> detail['ポケモン'] = 'ミズゴロウ'
>>> detail['ランク'] = 'A'
>>> pokemons.append(detail)
>>> detail = {}
>>> detail['ポケモン'] = 'キモリ'
>>> detail['ランク'] = 'B'
>>> pokemons.append(detail)
>>> from pprint import pprint
>>> pprint(pokemons)
[{'ポケモン': 'アチャモ', 'ランク': 'なし'},
 {'ポケモン': 'ミズゴロウ', 'ランク': 'A'},
 {'ポケモン': 'キモリ', 'ランク': 'B'}]
>>> with open('pokemons.csv', 'w') as f:
...   writer = csv.DictWriter(f, ['ポケモン', 'ランク'])
...   writer.writeheader()
...   writer.writerows([pokemon for pokemon in pokemons])
... 
10
>>> exit()
$ cat pokemons.csv 
ポケモン,ランク
アチャモ,なし
ミズゴロウ,A
キモリ,B

---

• ただの辞書

ポケモン名を辞書のキーとし、ランクを値としています。データにはポケモン名でアクセスします。

{'アチャモ': 'なし', 'キモリ': 'B', 'ミズゴロウ': 'A'}

>>> pokemons['キモリ']
'B'

• 辞書を値とする辞書

ポケモン名を辞書のキーとし、ポケモンデータを入れた辞書を値としています。ポケモンデータがランクひとつだけならただの辞書でもいいですが、データの種類が増えてくるとこのように辞書の値をさらに辞書とする必要が出てきます。
ポケモン名でポケモンを特定した後に、データ名で各データにアクセスします。

{'アチャモ': {'ランク': 'なし', '戦闘力': 0},
 'キモリ': {'ランク': 'B', '戦闘力': 50},
 'ミズゴロウ': {'ランク': 'A', '戦闘力': 100}}

>>> pokemons['キモリ']
{'ランク': 'B', '戦闘力': 50}
>>> pokemons['キモリ']['ランク']
'B'

• 辞書を要素とするリスト

ポケモンデータを入れた辞書を要素とするリストです。辞書と違ってキーがないので、ポケモン名もデータの一部となりました。
ポケモンの特定には位置（インデックス）を用い、各データにはデータ名でアクセスします。

[{'ポケモン': 'アチャモ', 'ランク': 'なし'},
 {'ポケモン': 'ミズゴロウ', 'ランク': 'A'},
 {'ポケモン': 'キモリ', 'ランク': 'B'}]

>>> pokemons[2]
{'ポケモン': 'キモリ', 'ランク': 'B'}
>>> pokemons[2]['ランク']
'B'

• リストを要素とするリスト

ポケモンデータを入れたリストを要素とするリストです。
キーが一切ないので、位置（インデックス）のみでデータにアクセスします。

[['アチャモ', 'なし'],
 ['ミズゴロウ', 'A'],
 ['キモリ', 'B']]

>>> pokemons[2]
['キモリ', 'B']
>>> pokemons[2][1]
'B'

• リストを値とする辞書

ポケモン名を辞書のキーとし、ポケモンデータを入れたリストを値としています。
ポケモン名でポケモンを特定した後に、位置（インデックス）で各データにアクセスします。

{'アチャモ': ['なし', 0],
 'キモリ': ['B', 50],
 'ミズゴロウ': ['A', 100]}

>>> pokemons['キモリ']
['B', 50]
>>> pokemons['キモリ'][0]
'B'

Comments

[makamaka]

ご回答ありがとうございます。
大変初歩的な質問で申し訳ありませんが、detail = {} # これは for ループの中に入れる
とはどういうことでしょうか。

[etherbeg]

私の理解では detail という辞書にはひとつのポケモンのデータが入る、そして for pokemon in soup.find_all() のループが1回まわるごとに新しくひとつのポケモンデータが抽出される、と理解していますので、ループが回るごとに新しい空の detail 辞書を作成して、そこにポケモンのデータを入れていく（そしてそれを pokemons リストに追加する）、ということです。
ループの外で最初に1回だけ作成した辞書をループの中で使い回すと、同じ辞書が上書きされていくので、最終的には同じ辞書への参照がいくつも作られるだけになってしまいます。
>>> pokemons = []
>>> detail = {}
>>> detail['ポケモン'] = 'アチャモ'
>>> detail['ランク'] = 'なし'
>>> pokemons.append(detail)
>>> detail['ポケモン'] = 'ミズゴロウ'
>>> detail['ランク'] = 'A'
>>> pokemons.append(detail)
>>> detail['ポケモン'] = 'キモリ'
>>> detail['ランク'] = 'B'
>>> pokemons.append(detail)
>>> pokemons
[{'ポケモン': 'キモリ', 'ランク': 'B'}, {'ポケモン': 'キモリ', 'ランク': 'B'}, {'ポケモン': 'キモリ', 'ランク': 'B'}]

[makamaka]

たびたびのご回答ありがとうございます。
私の解釈があっていれば
アチャモ、ミズゴロウ、キモリでそれぞれ手動でキーと、バリューを設定するということでしょうか。
たとえば、今回は３つで数が少ないため簡単なのですが、対象が１００以上など多数になった時も同じように自力でキーとバリューを設定することになるということでしょうか？

[etherbeg]

「手動で」というのが意味が分かりません。バリューを抽出するのも、バリューをキーに設定するのも、プログラムに書いてあるので、手動ですることは何もないのでは。対象が幾つになろうと自動で行うために、for ループを使ったプログラムを書いているのではないですか。

[makamaka]

説明が足らず申し訳ありません。
私なりに解釈し、
pokemon = []

for pokemon in soup.find_all("div", attrs={"class": "ttl-result-area"}):
name = pokemon.find("span",attrs={"class": "horizontal-rhythm"}).text.strip()
ranks = pokemon.find_all("span",attrs={"class": "lbl-ipo-decline"})
if len(ranks)>0:
rank = ranks[0].text
else:
rank = ""
print(f"rank={rank},name={name}")
detail = {}
detail['ポケモン'] = name
detail['ランク'] = rank
　pokemon.append(detail)
としましたが、うまくいきませんでした。
もし、原因がわかりましたら教えていただきたいです

[etherbeg]

もしかして対話モードでの実行を説明抜きに示したのが紛らわしかったのかと思い、

>>> が頭についているのは、Pythonの対話モードでのプログラムの実行を示しています。
これ自体はプログラムの一部ではありません。ソースファイルに書かれたプログラムを、サンプルデータを使うなどして実際に1行1行実行することによって、プログラムはエラーなく実行できるか、生成されたデータは期待したものと違っていないかを確認するために行っています。
これを示しているのはあくまで説明の一部です。実際にこのようにプログラムを1行1行手動で実行しなければいけないわけではありません。

…という説明を書いていたところですが、これ自体はいいですかね？

上記質問に関しては、うまくいかなかったというのがどううまくいかなかったのかを具体的に書いてもらわないと何が問題になっているのか分からないのと、コメント欄でコードを書くとインデントがなくなるのでPythonには致命的で正確な回答ができないので、コードを伴う質問は質問欄に追記してもらいたいです。

[makamaka]

>>>については私なりに調べ、理解しました。
理解が遅く申し訳ありません。

コードについては質問の方に追記しました。
お時間ある際にお目通しいただけたらと思います。

うまくいかなかった点については
detailで実行した結果が{'ポケモン': 'キモリ', 'ランク': 'B'}と最初と変わりありませんでした。
ほんらいなら[{'ポケモン': 'キモリ', 'ランク': 'B'}, {'ポケモン': 'キモリ', 'ランク': 'B'}, {'ポケモン': 'キモリ', 'ランク': 'B'}]となるかと思いますが、何か私の理解が足らないところがあるのでしょうか。

[etherbeg]

Pythonにおける辞書型とリスト型の違い、また、それらを入れ子にして組み合わせた「辞書を値とする辞書」「辞書を要素とするリスト」「リストを値とする辞書」「リストを要素とするリスト」の違いは分かりますか？

ひとつのポケモンのデータを保存するだけなら単なる辞書型でいいのですが、複数のポケモンのデータを保存しようとしたら、「辞書を値とする辞書」か、「辞書を要素とするリスト」にする必要があります。そのことは分かりますか？

質問文を読むと、質問者さんは「辞書を値とする辞書」を想定しているようにも読めます。もしくは、単に辞書というデータ型についての理解が足りていないようにも思えます。

私の回答は、「最終的に質問文にあるようなCSVに出力することが目的なら、『辞書を要素とするリスト』にするのが良いと思うので、そのやり方を説明します」というものです。これは回答を読んだらわかると思って、回答に明記しなかったので、申し訳なかったのですが。

今回の事例に即して言えば、「辞書を要素とするリスト」とは、「個々のポケモンデータが順番に並んだリスト」です。個々のポケモンデータを作成するための辞書が detail で、複数の detail が順番に納められて並んでいるものが pokemons リストです。
pokemons リストの中では、個々のポケモンデータはリストの中での位置で識別されます。detail という名称は個々のポケモンデータを作成するための作業用のものですので、detail という名称では pokemons リストの中のデータにはアクセスできません。個々のデータには、pokemons[0], pokemons[1], pokemons[2] ... というようにアクセスします。

質問文やコメントを読んでいると、質問者さんは、detail という辞書にすべてのポケモンデータを収めると思っている節があります。
もしどうしてもそうしたいのなら、「辞書を値とする辞書」にする必要があります。すべてのポケモンを入れる辞書を detail という名前にしたいのなら、個々のポケモンデータを入れる辞書も、それとは別に作らなければなりません。
そして個々のポケモンデータを識別するキーを決めなければなりません。ポケモンの名前とか、連番とか、一意に決まるものをキーにする必要があります。
キーに対応する値として、個々のポケモンデータの辞書を登録するのが、「辞書を値とする辞書」を作る作業になります。

「追加のソースコード」がうまくいかないとのことですが、detail という辞書は for ループが回るごとに新しく作られて書き換えられていくので、for ループが終了してループを抜けた後に detail の中身を表示すると、一番最後のループで作られた detail のデータのみが表示されます。
ループを回るごとに、detail を別のリストなり辞書なりに保存しておかないと、それはループを回るごとに消えていきます。「追加のソースコード」では、「detail を別のリストなり辞書なりに保存しておく」作業が行われていません。

print(f"rank={rank},name={name}") の表示はループごとに行われているので、そのループの回での detail の中身の表示しか行っていません。先に表示した文字が消えないので、結果的に最後にはすべてのポケモンデータの表示がされていますが、それは先に表示されたポケモンのデータがどこかに保存されていることを意味しません。

[etherbeg]

あと「追加のソースコード」には
detail = {}
が2箇所にありますが、どちらかひとつでいいです。

[makamaka]

ご回答ありがとうございます。
返信が遅くなり、大変申し訳ありません。
ご指摘いただいた箇所については私の知らないことばかりでしたので、帰宅後、再度勉強し、実行させていただきます。

[etherbeg]

すみません、私がちょっと勘違いしていたかもしれません。

detail[name] = rank

だと

あちゃも　　ミズゴロウ　　　キモリ
　なし　　　　　A　　　　　　B

と出力されるというのは、CSVにそのように出力されるということでしょうか。だとしたら上で述べたようなややこしいことは言わずとも、CSVへの書き込み方を変えればそれで良かったのでは、ということに今になって気がつきました。

最初に自分で思いついた回答に引きずられることなく、もっと簡単な回答である detail[name] = rank では駄目な理由をもっとちゃんと掘り下げて聞くべきだったかもしれません。
もし私が回答を書き込まなければ、先に書き込んでいた回答者の方とコメント欄でそのような話になっていたかもしれません。申し訳ありません。

[etherbeg]

これだけだと何なので、データ型の違いを回答に追記しました。

Answer 2

辞書型は、ひとつのキーに対して、ひとつの値しか持てません。

    detail['ポケモン'] = name
　　detail['ランク'] = rank

を、

    detail[name] = rank

とすれば、全部の結果が入るでしょう。

Comments

[makamaka]

ご回答ありがとうございます。
教えていただいた方法についてはすでに施行したのですが、
detail[name] = rank
ですと
あちゃも　　ミズゴロウ　　　キモリ
　なし　　　　　A　　　　　　B

というに出力されます。
実際はこれ以上長いので教えていただいたやり方ですと多少の不都合があるため
ポケモン　　　　ランク
アチャモ　　　　　なし
ミズゴロウ　　　　A
キモリ　　　　　　B

としたいと思っています。
もしやり方とうわかればご教授願います