日付データの抽出・削除

前提・実現したいこと

二つの日付型データについて、二つともに共通して入っている日付を残し、どちらか一方のみに入っている日付を削除したい。
最後に二つの時刻データを並べたときに、同じ日付が同じ行に並んでいてほしい。
また、日付の列に対して上記の処理を行った後に該当する日付を含む行のみを抽出したい。

該当のソースコード

＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿
A Date1 value1
0 2019-01-01 -5227187.526
1 2019-01-02 -5227187.533
2 2019-01-03 -5227187.522
3 2019-01-04 -5227187.527
4 2019-01-05 -5227187.540
5 2019-01-06 -5227187.543
6 2019-01-07 -5227187.520
7 2019-01-08 -5227187.553
8 2019-01-09 -5227187.529
9 2019-01-10 -5227187.528
10 2019-01-11 -5227187.527

B Date2 value2
0 2019-01-01 -5227187.533
1 2019-01-03 -5227187.528
2 2019-01-04 -5227187.527
3 2019-01-06 -5227187.520
4 2019-01-07 -5227187.533
5 2019-01-08 -5227187.526
6 2019-01-09 -5227187.553
7 2019-01-11 -5227187.540
8 2019-01-12 -5227187.527
9 2019-01-13 -5227187.533
10 2019-01-15 -5227187.526

＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿
dtt=times['Date1']-times['Date2']
for A in time1:
for B in time2:
dtAB=A-B
if dtAB == 0:
print(dtAB)
elif A>B:
A.drop()
B=B
else:
B.drop()
A=A

###欲しい結果

A Date1 value1
0 2019-01-01 -5227187.526
2 2019-01-03 -5227187.522
3 2019-01-04 -5227187.527
5 2019-01-06 -5227187.543
6 2019-01-07 -5227187.520
7 2019-01-08 -5227187.553
8 2019-01-09 -5227187.529
10 2019-01-11 -5227187.52

###やりたいこと
上記のA,Bについて、1列目の日付で比較を行いAとBの両方に含まれている日付を残したいです。また、その日付を含む行のvalueについてもデータを残したいです。
出来れば抽出後に行番号を振り直したいです。

発生している問題

・dropが使えない。
・一方だけに入っているデータのみを削除したいが、for文で回したら引き算で０にならなかった日付すべてが消えてしまいそう。

8524ba23

2020/08/28 08:54 編集

やりたいことおよび欲しい結果がよく分かりません。１０行ほどの単純データ、欲しい結果を提示することは可能でしょうか？というか単純にDate1とDate2が等しい行のみ抽出ではだめでしょうか？

high111

2020/08/28 09:07

ご質問ありがとうございます。使用している日付のデータは、片方の列だけ穴あきがありまして、その穴あきのせいで（359行目以降のデータのように）途中から左右の行で日付けがずれてしまっています。出来れば、Date1に含まれる日付について、Date2にも（行がずれているとしても）存在していればその日付を残して、Date1とDate2どちらか一方のみにしか含まれない日付が存在していればその日付のみを削除したいと考えています。

8524ba23

2020/08/28 09:35

やはりよく分からないので回答ではダメなデータ例と欲しい結果を提示いただければと思います。

high111

2020/08/28 15:22

説明の表現を変えてみました。宜しくお願い致します。

行動規範の内容に同意します

回答1件

ベストアンサー

欲しい結果は以下のようなものでしょうか。

Python
1import pandas as pd
2
3df1 = pd.DataFrame({'Date1':['2019-01-01','2019-01-02','2019-01-03'], 'value1':[1,2,3]})
4df2 = pd.DataFrame({'Date2':['2019-01-01','2019-01-03'], 'value2':[10,30]})
5df1['Date1'] = pd.to_datetime(df1['Date1'])
6df2['Date2'] = pd.to_datetime(df2['Date2'])
7print(df1)
8#       Date1  value1
9#0 2019-01-01       1
10#1 2019-01-02       2
11#2 2019-01-03       3
12print(df2)
13#       Date2  value2
14#0 2019-01-01      10
15#1 2019-01-03      30
16
17# 両方に存在する日付のみ抽出
18s = set(df1['Date1']) & set(df2['Date2'])
19
20df1 = df1[df1['Date1'].isin(s)]
21print(df1)
22#       Date1  value1
23#0 2019-01-01       1
24#2 2019-01-03       3
25
26df2 = df2[df2['Date2'].isin(s)]
27print(df2)
28#       Date2  value2
29#0 2019-01-01      10
30#1 2019-01-03      30

質問修正前の回答

Python
1import pandas as pd
2
3df = pd.DataFrame({'Date1':['2019-01-01','2019-01-03',''], 'Date2':['2019-01-01','2019-01-02','2019-01-03']})
4df['Date1'] = pd.to_datetime(df['Date1'])
5df['Date2'] = pd.to_datetime(df['Date2'])
6print(df)
7#       Date1      Date2
8#0 2019-01-01 2019-01-01
9#1 2019-01-03 2019-01-02
10#2        NaT 2019-01-03
11
12# 両方に存在する日付のみ抽出して昇順ソート
13l = sorted(set(df['Date1']) & set(df['Date2']))
14
15ret = pd.DataFrame({'Data1':l, 'Data2':l})
16print(ret)
17#       Data1      Data2
18#0 2019-01-01 2019-01-01
19#1 2019-01-03 2019-01-03