subprocessを使ったコマンド実行中にデバッグ(ステップ実行)したい

実現したいこと

前提としてjupyterlab環境で実行しています。
以下hogehoge.pyのコードをpdb.set_trace()を使用してデバッグしたいと考えています。

Python
1cmd = ["hogehoge.py", "--hensu", hensu]
2subprocess.run(cmd)

発生している問題・分からないこと

subprocessで実行中にpdb.set_trace()を使用しているせいか以下エラーになりデバッグができていません。

  File "/opt/conda/lib/python3.11/bdb.py", line 90, in trace_dispatch
    return self.dispatch_line(frame)
           ^^^^^^^^^^^^^^^^^^^^^^^^^
  File "/opt/conda/lib/python3.11/bdb.py", line 115, in dispatch_line
    if self.quitting: raise BdbQuit
                      ^^^^^^^^^^^^^
bdb.BdbQuit

コマンドライン上で実行すれば可能という記事がありましたが、subprocess実行時に多くの変数を定義しているため、可能であればjupyterlabのコードセル上でデバッグしたいと考えております。

今回pdb.set_trace()のデバッグ方法にはこだわっておらず、
ステップ実行しながら値を確認できれば手段は問わないと考えております。
恐れ入りますが代替手段も含めてご教授いただければ幸いです。

該当のソースコード

Python
1cmd = ["hogehoge.py", "--hensu", hensu, "--hensu2", hensu2, , "--hensuN", hensuN]
2subprocess.run(cmd)

試したこと・調べたこと

teratailやGoogle等で検索した
ソースコードを自分なりに変更した
知人に聞いた
その他

上記の詳細・結果

今回のケースに該当せず
https://stackoverflow.com/questions/34914704/bdbquit-raised-when-debugging-python-with-pdb

補足

特になし

bsdfan

2025/05/20 13:04

jupyterlab はセル単位で対話的な実行ができますが、サブプロセスで pdb を対話的に動作させるようなことはできないように思います。サブプロセスで実行するのではなく、モジュールとして読み込んで、jupyter のカーネルの上でデバッグ実行するような方法とかではダメでしょうか。

TakaiY

2025/05/20 13:45

通常の.pyファイルであれば、VSCodeなどのIDE/エディタでデバッグすればいいと思うのですが、わざわざ困難なjupyterのsubprocessでやりたい理由は何でしょうか。

Lemonn

2025/05/21 00:29

bsdfanさんご回答ありがとうございます。 pdb は対話的に動作させることができないのですね。モジュールとして読み込む方法、ご教授いただきありがとうございます。試してみます。

Lemonn

2025/05/21 00:33 編集

TakaiYさんご回答ありがとうございます。 jupyterのsubprocessでやりたい理由はないのです。 subprocessですでに作成されたコードに対して、どのような手段でデバッグできるかも含めお聞きしたいです。 VSCodeなどのIDE/エディタでデバッグするのが基本的なやり方と理解しました。ありがとうございます。 AWSのSagenaker上で動作させているのですが、そこに対してもVSCodeで接続させることはできるのでしょうか。自分でも調べてみます。

TakaiY

2025/05/21 01:15

> AWSのSagenaker上で動作させている SageMaker Studio Lab ということでしょうか。それがどのような仕組みで動いているのかわかりませんが、VSCodeで接続は難しそうに思います。デバッグ対象のpythonコードが、モジュールとして読み込むことを意識して作られていれば、モジュールとして読んで(=importして)うごかしてみることができるでしょうが、そうでないと厳しいですね。そのコードのデバッグの目的は何でしょうか？ AWS上でなくローカルで動かすとか、内容によってはprint文を埋めこんでという手もあります。

Lemonn

2025/05/21 01:50

TakaiYさんありがとうございます。「モジュールとして読み込むことを意識して作られていればモジュールとして読んで(=importして)うごかしてみることができる」 bsdfanさんに記載いただいた内容と理解しております。恐らく上記できそうな気がしています。ありがとうございます。取り組んでみます。また、デバッグの目的はコードの理解になります。ステップ実行で一つ一つ動作を確認したいと考えておりました。そのため適宜print文での確認も行いたいと思います。

TakaiY

2025/05/21 02:44

> デバッグの目的はコードの理解そのコードが外部と通信するようなものだと難しいかもしれませんが、理解が目的ということであればローカルでVSCodeなどでやるのが楽ではないかと思います。

Lemonn

2025/05/21 03:11

>そのコードが外部と通信するようなもの本件は上記に該当します。 DBと通信して動作させている箇所なので、やはりモジュールとして読み込みデバッグする方法が良さそうですね。限られた環境でのデバッグがいかに難しいか勉強になりました。 TakaiYさん、bsdfanさんお教えいただき大変ありがとうございました。