Pythonで複数シートあるExcelの差分比較

前提・実現したいこと

pythonで２つのExcelファイル（各ファイル複数シートある）の差分比較をして、その差分箇所を別の新規Excelブックに出力するコードを作ろうとしてます。
例：
比較するファイルがExcel1とExcel2とすると、
Excel1の1シート目とExcel2の1シート目を差分比較
Excel1の2シート目とExcel2の2シート目を差分比較
Excel1の3シート目とExcel2の3シート目を差分比較
・・・
みたいな仕組みのコードを作ってみましたが、
実行してみたら以下のエラーメッセージが発生しました。

解決策が思い当たらず、何かこのようなExcelのdiff目的でのPythonについてヒントお持ちでしたらご教授いただきたいです。

Traceback (most recent call last):
File "C:\Users\owner\anaconda3\lib\site-packages\pandas\core\indexes\range.py", line 695, in getitem
return self._range[new_key]
IndexError: range object index out of range

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
File ".\ex.py", line 23, in <module>
value_OLD = df1[key].iloc[df1[key].index[row],df1[key].index[col]]
File "C:\Users\owner\anaconda3\lib\site-packages\pandas\core\indexes\range.py", line 697, in getitem
raise IndexError(
IndexError: index 4 is out of bounds for axis 0 with size 4


### 該当のソースコード

import pandas as pd
from pathlib import Path
import numpy as np

old = input('片方のファイル：')
new = input('もう片方のファイル：')
output = input('差分結果ファイル出力先：')
difference = Path(output)

with pd.ExcelFile(old) as older:
    df1 = pd.read_excel(older, sheet_name = None,header=None,index_col=None)
with pd.ExcelFile(new) as newer:
    df2 = pd.read_excel(newer, sheet_name = None,header=None,index_col=None)

diff=df1.copy()

differ=str(difference)+"\"+  "excel.xlsx"
writer = pd.ExcelWriter(differ,engine="xlsxwriter",mode="A")# pylint: disable=abstract-class-instantiated
   
for key in df1:
    for row,index in df1[key].iterrows():
        for col,column in df1[key].iteritems():  
            value_OLD = df1[key].iloc[df1[key].index[row],df1[key].index[col]]
            value_NEW = df2[key].iloc[df2[key].index[row],df2[key].index[col]]
            if value_OLD == value_NEW:
                diff[key].iloc[diff[key].index[row],diff[key].index[col]] = np.nan
            else:
                if value_NEW=="nan" and value_OLD=="nan":
                    diff[key].iloc[diff[key].index[row],diff[key].index[col]] = np.nan
                else:
                    diff[key].iloc[diff[key].index[row],diff[key].index[col]] = ("{}→{}").format(value_OLD,value_NEW)
                    print(value_NEW)

    diff[key].to_excel(writer, sheet_name = key, index=False,header=False,na_rep="") 
writer.save()
writer.close()