データフレームで要素ごとに重複を削除し左詰めにする

Question

やりたいこと

以下のようなデータフレームがあったときに、行ごとに見て重複を削除し、空白を削除し左に詰めていく処理をやりたいと思っております。

<処理前のデータフレーム>

AAA     AAA CCC AAA     DDD BBB     AAA
DDD EEE FFF GGG HHH III III	
KKK         JJJ         LLL KKK     MMM     NNN   

<処理後のデータフレーム>

AAA CCC DDD BBB
DDD EEE FFF GGG HHH III	
KKK JJJ LLL MMM NNN   

行や列に対する重複削除の方法はdf.drop()やdf.drop_duplicates()で可能かと思いますが、今回のように要素ごとに判定し、処理を行う場合にうまくいきません。
どのように行えばうまくいくかお教え頂けましたら幸いです。
何卒よろしくお願い申し上げます。

Answer 1

行毎にdrop_duplicatesを適用することで、求める結果が得られるかと思います。

import pandas as pd

df = pd.DataFrame([['AAA', 'AAA', 'CCC', 'AAA', 'DDD', 'BBB', 'AAA'],
                   ['DDD', 'EEE', 'FFF', 'GGG', 'HHH', 'III', 'III'],
                   ['KKK', 'JJJ', 'LLL', 'KKK', 'MMM', 'NNN']])

df = df.apply(lambda r: r.drop_duplicates().reset_index(drop=True), axis=1)

# lambdaを使わない例
"""
def drop(r):
    r = r.drop_duplicates().reset_index(drop=True)
    return r
df = df.apply(drop, axis=1)
"""

print(df)
"""
     0    1    2    3    4     5
0  AAA  CCC  DDD  BBB  NaN   NaN
1  DDD  EEE  FFF  GGG  HHH   III
2  KKK  JJJ  LLL  MMM  NNN  None
"""

Comments

[mi2]

lambda式についての理解を深めて自在に使えるように練習します。
いつもありがとうございます。

[8524ba23]

まずはlambdaを使わず別関数にしたほうが理解がしやすいかと思います。回答コードにも追記しました。

[mi2]

ありがとうございます。
確かに処理的にdf.applyの方が理解しやすいですね。
先日お教え頂いた関数で固めた処理をdfに適用する形の方をまずは確実に出来るように練習しようと思います。
感謝申し上げます。