windowsアプリケーション(メモ帳等)の自動化方法について

Question

前提・実現したいこと

windowsアプリケーション(メモ帳、エクスプローラー等)の自動化をpythonを使用して行おうとしています。
Appiumやpywinautoで自動化できているのですが、
Click動作のときに、マウスなどを移動させると、対象の要素がClickできずにエラーとなってしまいます。

Click動作の時に、マウスを動かしても正常に動作させる方法はあるのでしょうか？
違うライブラリで実現できるのであれば、それもご教授いただけますでしょうか？

補足情報（FW/ツールのバージョンなど）

windows 10
python 3.8

Comments

[Zuishin]

クラシカルな Windows アプリケーションの場合は、ボタンなどのコントロールがウィンドウなので、他の方法も使えますが、WPF や UWP の場合はそうもいきません。マウスを実際に動かしてその位置をクリックさせる方法が最も安定して動くと思います。マウスを人間が持たなければいいだけではありませんか？

[ji-desuji]

＞マウスを人間が持たなければいいだけではありませんか？
その通りなのですが、自動化させている間は、PCで何もできなくなってしまうので、それを解消したいと思っています。

[Zuishin]

自動化させている間は、基本的にその PC で何もしてはいけません。複数の PC を使うか、仮想マシンを使うのはどうでしょうか。

そもそもメモ帳や Explorer を自動化するのではなく、Python で完結させるのがベターだと思います。

Answer 1

WindowsというOSそのものがシングルユーザーを前提とした作りになっているので、マウス操作のような動作がユーザーが直接行うものとプログラムが動かしているものを区別する術がありません。

Linuxみたいにちゃんとしたマルチユーザー環境なら、プログラムを実行するユーザーを分けておけばできるかもしれませんが。

違うライブラリで実現できるのであれば、それもご教授いただけますでしょうか？

自動化の対象が、例に挙げられていたメモ帳・エクスプローラのレベルであれば、どちらもそれをウィンドウで操作するのではなく、プログラムとして作ったほうが速いです。

もっと複雑なことをやるアプリの操作であれば、専用の環境を用意してマウスを引っこ抜きましょう。