データフレームで空白(Nan)のところだけ別のデータフレームの値で補う処理を簡潔に記載したい。

Question

前提・実現したいこと

以下の図のように、DBから取り込んだデータをpandasに読み込み、Nanになっている箇所だけを
別のデータフレームで補完する処理を書きたいと思っています。
(df_2もdf_1もNanの箇所はNanでよい)

ただ、for文で記載するとプログラムが冗長になるため、できれば簡潔な書き方で表現したいと思っています。
jupyterで試してみたのですが、上図のような処理を簡潔に記述することができません。
（２つのDFの差集合などはできたのですが、上のような処理にすることはできませんでした。
どのように記述したらシンプルに表現できるか、ご教示いただくことは可能でしょうか。

試したこと

jupyterなどで色々コードを書いてみた

補足情報（FW/ツールのバージョンなど）

Python 3.7.6
Pandas 1.2.0

Answer 1

df_1とdf_2が同じ形(インデックスとカラムが同じ)なら以下でできます。

df_2 = df_2.fillna(df_1)

Comments

[H.K2]

早速のご回答ありがとうございます！
fillnaのなかにdf_1を入れるということは、どういう処理になっているのでしょうか。
ブーリアンインデックス処理ということでしょうか。
indexとcolumnが同じであれば、df_2に余分な列があっても問題なく動いたのですが、
これは動作上正しいでしょうか。（例えば、df_2にdd:["a","b","c"]を追加してみて
問題なく動いたのですが、動作上は無視されているということでしょうか。）

[bsdfan]

fillnaはその名の通り、naをなんらかの値で埋める処理をします。
https://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.DataFrame.fillna.html

いろんな引数をとることができますが、データフレームを渡すと、naのところを引数のデータフレームの値で埋めてくれます。

> ブーリアンインデックス処理ということでしょうか。

ブーリアンインデックス処理ではないです。
内部で同じような処理になっているかもしれませんが、そこまではわからないです。

> df_2に余分な列があっても問題なく動いたのですが、

naの部分のindexとcolumnに対応する値をとってきているだけなので、余分な列があっても問題ないようですね。逆に、列が足りない場合はNaNのままっぽいです。

[H.K2]

ありがとうございます！こちらの処理のほうが自分のユースケースにあっているようなのと、
１行で書けるのはありがたいです。fillnaはこういう書き方もできるんですね、勉強になりました！
（いままで前の値で補完するとかしかやってなかったので、dfを入れられるというのを知りませんでした…????）

Answer 2

画像による質問ですので、画像で回答します。

以下で出来ます。

Comments

[H.K2]

ご回答ありがとうございます！
なるほど、シンプルになりますね。
ちなみに、もしdf2に余分な列があった場合、上記コードでは動かない様なのですが、
一旦余分な列を除去してから再度くっつける、などが必要でしょうか。