Python あるディレクトリにｃｓｖfileがあり、ファイル数が５個以上になると古いファイルを削除して常にファイル数を５個にしたいです。

Question

前提・実現したいこと

あるディレクトリにｃｓｖfileがあり、ファイル数が５個以上になると古いファイルを削除して常にファイル数を５個にしたいです。

for file in os.path.join(server_dir,'*.csv'):
        file_list.append(file)
        latest_file = max(file_list, key=os.path.getctime)

MAX_CNT = 5
while len(file_list) >=5:
    for i, file in enumerate(file_list):
        if i < MAX_CNT-1:
            os.remove(file)
           
    file_list = file_list-1

こうだと思いましたが、file_listはリスト型の為、うまくできませんでした。
どうすればよいでしょうか？
ご教示お願いいたします。

発生している問題・エラーメッセージ

エラーメッセージ