特定のウィンドウのスクリーンショットを撮る方法

Question

前提

特定のウィンドウの文字認識をしたく、

特定のウィンドウのSSを撮る → 特定の位置にセット(ウィンドウからの相対位置は一定) → PyOCRで読み取る

といった流れのコードを作りたいと思っているのですが、ウィンドウを最前面に表示せずともSSを撮る方法はあるでしょうか。

OBSといった配信ソフトでは特定のウィンドウをキャプチャーして表示できることから不可能ではいないと考えています。

Pythonで解決できる場合の案を教えていただきたいです。

ソースコード

def ScreenShot(x1, y1, x2, y2):
　　 #特定のウィンドウの指定は可能か？
    sc = pyautogui.screenshot(region=(x1, y1, x2, y2))
    sc.save('pic.jpg')
    img = cv2.imread('pic.jpg')
    #画像加工
    gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)
    tmp = cv2.resize(gray, (gray.shape[1]*2, gray.shape[0]*2), interpolation=cv2.INTER_LINEAR)
    cv2.imwrite('pic.jpg', tmp)

補足

この方のQiitaを参考にさせていただきました。

Windows 10
Python 3.9.6
PyAutoGui 0.9.53
PyOCR 0.8
OpenCV-Python 4.5.3.56

Answer 1

まず、ウィンドウを最前面に表示せずにキャプチャするのはPythonではかなり厳しいと思います。
そこを妥協すれば、以下のようなコードでウインドウ領域を取ることができるので、それをもとにキャプチャは可能です。
なお、マルチディスプレイおよびその配置、解像度違いなどにより意図した結果が得られない可能性はあります。

import ctypes
from ctypes import sizeof, byref
from ctypes.wintypes import RECT

import win32gui
import pyautogui

# 指定のタイトルを持つウインドウを最前面にして領域を返す
def get_region( title):
    ret = None

    def enum_proc( hwnd, _):
        nonlocal ret, title
        name = win32gui.GetWindowText(hwnd)
        if name.find(title) >= 0:
            ret = hwnd
            return False # 列挙終了

    # Python3.7 で EnumWindows の列挙を止める際に EnumWindowsProc に 0 を返すとエラーが発生する
    # https://teratail.com/questions/274340
    try:
        win32gui.EnumWindows( enum_proc, 0)
    except:
        pass

    if ret:
        rect = RECT()
        ctypes.windll.dwmapi.DwmGetWindowAttribute(ret, 9, byref(rect), sizeof(rect))
        region = (rect.left, rect.top, rect.right-rect.left, rect.bottom-rect.top)

        win32gui.SetForegroundWindow(ret)

        return region

region = get_region('フォト')
if region:
    sc = pyautogui.screenshot(region=region)
    sc.save('pic.jpg')

実行結果