Google colaboratoryでPyAutoGuiを使いたい

Question

前提・実現したいこと

python初心者です。
Google colaboratory のPython3でPyAutoGuiを導入したいです。

発生している問題・エラーメッセージ

importを実行すると下記のようなエラーが発生してしまいます。

---------------------------------------------------------------------------
KeyError                                  Traceback (most recent call last)
<ipython-input-20-fa2587ca3a04> in <module>()
----> 1 import pyautogui

/usr/local/lib/python3.6/dist-packages/pyautogui/__init__.py in <module>()
    113     from ._window_win import Window, getWindows, getWindow
    114 else:
--> 115     from . import _pyautogui_x11 as platformModule
    116 
    117 

/usr/local/lib/python3.6/dist-packages/pyautogui/_pyautogui_x11.py in <module>()
    158 
    159 # Taken from PyKeyboard's ctor function.
--> 160 _display = Display(os.environ['DISPLAY'])
    161 
    162 

/usr/lib/python3.6/os.py in __getitem__(self, key)
    667         except KeyError:
    668             # raise KeyError with the original key value
--> 669             raise KeyError(key) from None
    670         return self.decodevalue(value)
    671 

KeyError: 'DISPLAY'

該当のソースコード

!pip install python3-xlib
!pip install pyautogui
import pyautogui

試したこと

以下のサイトでも同じ症状が報告されていました。
https://github.com/asweigart/pyautogui/issues/161

サイトは、pipを使わず直接ファイルをダウンロードしたら解決した、という内容だと思われます。
Google colaboratoryでこの問題を解決するには、PyAutoGuiのファイルを全て
アップロードすれば良いのでしょうか？稚拙な質問ですが、ご教授頂けたらと思います。

Answer 1

既に回答にあるとおりGUIものは動きません。
仮想ディスプレイを導入してみたら取り合えずimportまではエラーでなく出来ました。
その先はまた調べながらご確認ください。

# xvfbを導入
!apt-get -qq -y install xvfb xauth

# pyvirtualdisplayを導入
!pip -q install pyvirtualdisplay python3-xlib pyautogui

# pyvirtualdisplayで仮想ディスプレイを開始
from pyvirtualdisplay import Display
display = Display(visible=0, size=(1024, 768), use_xauth=True)
display.start()
import os
os.environ["DISPLAY"] = ":" + str(display.display) + "." + str(display.screen)

# お目当てのコードはここ以降になります
import pyautogui

Comments

[15princess]

なるほど、GUI関係はcolaboratoryでは一切使えないと思いきや、
仮想ディスプレイという手があったんですね！
乗せて頂いたコードで、目的が達成できるか試してみます！
回答ありがとうございました。

Answer 2

確認はしていませんが、Google colaboratoryでは、GUI関連のものは動作しないと思われます。
jupyter notebookではこちらのように動作しないため、colaboratoryでも同様でしょう。
そもそも、ブラウザ上で動作しているものに、OSのGUIで動作するものを実行させようとしている時点で、正しく動作しないのは当然だろうと思います。

Comments

[15princess]

PCにインストールしたpython3ではエラー無く動作していたため、
この説明で納得できました！
ブラウザ上の環境で動かしていることを失念していました。
回答ありがとうございました。