S3バケットで任意フォルダからファイル読み込みのやり方がわからないです

Question

前提

フォルダをS3バケットへアップロードし、そこから特定階層のテキストファイルを読み込むコードを作成しています。
現在作成中のコードは以下通りです。(S3へのアクセス権限関連はすべて許可済みです。)

import boto3

def lambda_handler(event, context):

    s3 = boto3.client('s3')
    
    bucket_name = 'bucket'
    file_name = 'open.txt'
    S3KeyPrefix = 'sample/'
    
    response = s3.get_object(Bucket=bucket_name, Key=S3KeyPrefix + file_name)
    body = response['Body'].read()
    
    bodystr = body.decode('utf-8')
    data = bodystr.split('\n')[10]

    print(data)

上記ですとsampleフォルダをアップロードした際、フォルダ中に含まれている「open.txt」の10行目を読み込んで出力するコードとなります。

実現したいこと

S3KeyPrefixにフォルダを指定していますが、フォルダの名称は固定ではありません。
ただし、1階層下に必ずopen.txtがフォルダに含まれています。
なのでフォルダの名称に関係なくtxtファイルの読み込みをしたいと思います。

試したこと

https://hacknote.jp/archives/20100/
ここに記載されている通り、特定フォルダを指定する方法をPrefixで指定すればいいのかとは思いますが、
何をどうやって指定するのかが分からない段階です。
実現させるためにどのようにすればいいのかご教授いただければ幸いです。
(その他に有効な手段があれば教えていただければと思います。)

補足情報（FW/ツールのバージョンなど）

Python 3.9 , AWS lambda

Answer 1

ここに記載されている通り、特定フォルダを指定する方法をPrefixで指定すればいいのかとは思いますが、

いえ、逆にprefixなどは何も指定せずに全リストを取得して、その中からopen.txtを探す、という形にするのが妥当かと思います。

S3のAPIで、末尾部分を条件として対象ファイルを絞り込む方法はなさそうです。

Comments

[退会済みユーザー]

ありがとうございます。
全取得する方法というアドバイスを受け以下のように修正しました。

def lambda_handler(event, context):
s3c = boto3.client('s3')
next_token = ''
while True:
if next_token == '':
response = s3c.list_objects_v2(Bucket=BUCKET_NAME)
else:
response = s3c.list_objects_v2(Bucket=BUCKET_NAME, ContinuationToken=next_token)
for content in response['Contents']:
keyn = content['Key']
prt = keyn.split('/')
print(prt)

これでアップロードされたファイルを全取得していることを確認できました。
あとはこの中でopen.txtを指定してファイルを開く方法ですが
こちらは別問題になりそうなので別に質問として投稿しようと思います。
解決策が見つかったという頃で一旦はクローズにしようと思います。