Cupyを実行したときに「NVRTCError: NVRTC_ERROR_COMPILATION (6)」が起きます

Question

前提・実現したいこと

「Quadro K620」にnvidia社のCUDA toolkit 11.3をインストールし、python3.9.5にてCupyを実行したときエラーメッセージが表示されました。
自己解決できず困り果てています。

発生している問題

Traceback (most recent call last):
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 623, in compile
    nvrtc.compileProgram(self.ptr, options)
  File "cupy_backends\cuda\libs\nvrtc.pyx", line 133, in cupy_backends.cuda.libs.nvrtc.compileProgram
  File "cupy_backends\cuda\libs\nvrtc.pyx", line 145, in cupy_backends.cuda.libs.nvrtc.compileProgram
  File "cupy_backends\cuda\libs\nvrtc.pyx", line 64, in cupy_backends.cuda.libs.nvrtc.check_status
cupy_backends.cuda.libs.nvrtc.NVRTCError: NVRTC_ERROR_COMPILATION (6)

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "cupy\_core\core.pyx", line 1070, in cupy._core.core.ndarray.__add__
  File "cupy\_core\_kernel.pyx", line 1104, in cupy._core._kernel.ufunc.__call__
  File "cupy\_core\_kernel.pyx", line 1127, in cupy._core._kernel.ufunc._get_ufunc_kernel
  File "cupy\_core\_kernel.pyx", line 901, in cupy._core._kernel._get_ufunc_kernel
  File "cupy\_core\_kernel.pyx", line 61, in cupy._core._kernel._get_simple_elementwise_kernel
  File "cupy\_core\core.pyx", line 1995, in cupy._core.core.compile_with_cache
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 432, in compile_with_cache
    return _compile_with_cache_cuda(
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 509, in _compile_with_cache_cuda
    ptx, mapping = compile_using_nvrtc(
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 271, in compile_using_nvrtc
    return _compile(source, options, cu_path,
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 255, in _compile
    ptx, mapping = prog.compile(options, log_stream)
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 635, in compile
    raise CompileException(log, self.src, self.name, options,
cupy.cuda.compiler.CompileException: Catastrophic error: cannot open source file "C:\Users\User\AppData\Local\Temp\tmpyi95wkqt\df1479848d067b9d322bed29495eb57e_2.cubin.cu"

1 catastrophic error detected in the compilation of "C:\Users\User\AppData\Local\Temp\tmpyi95wkqt\df1479848d067b9d322bed29495eb57e_2.cubin.cu".
Compilation terminated.

該当のソースコード

>>> Python 3.9.5 (tags/v3.9.5:0a7dcbd, May  3 2021, 17:27:52) [MSC v.1928 64 bit (AMD64)] on win32
>>> Type "help", "copyright", "credits" or "license" for more information.

import cupy,cupyx
a=cupy.array([[1,2],[2,1]])
b=cupy.array([[1,2],[2,1]])
a+b

試したこと

「a+b」と同様に、「a*b」を実行したときも同じエラーが発生します。

import cupy,cupyx
a=cupy.array([[1,2],[2,1]])
b=cupy.array([[1,2],[2,1]])
a+b

↓変更

import cupy,cupyx
a=cupy.array([[1,2],[2,1]])
b=cupy.array([[1,2],[2,1]])
a*b

Traceback (most recent call last):
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 623, in compile
    nvrtc.compileProgram(self.ptr, options)
  File "cupy_backends\cuda\libs\nvrtc.pyx", line 133, in cupy_backends.cuda.libs.nvrtc.compileProgram
  File "cupy_backends\cuda\libs\nvrtc.pyx", line 145, in cupy_backends.cuda.libs.nvrtc.compileProgram
  File "cupy_backends\cuda\libs\nvrtc.pyx", line 64, in cupy_backends.cuda.libs.nvrtc.check_status
cupy_backends.cuda.libs.nvrtc.NVRTCError: NVRTC_ERROR_COMPILATION (6)

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "cupy\_core\core.pyx", line 1086, in cupy._core.core.ndarray.__mul__
  File "cupy\_core\_kernel.pyx", line 1104, in cupy._core._kernel.ufunc.__call__
  File "cupy\_core\_kernel.pyx", line 1127, in cupy._core._kernel.ufunc._get_ufunc_kernel
  File "cupy\_core\_kernel.pyx", line 901, in cupy._core._kernel._get_ufunc_kernel
  File "cupy\_core\_kernel.pyx", line 61, in cupy._core._kernel._get_simple_elementwise_kernel
  File "cupy\_core\core.pyx", line 1995, in cupy._core.core.compile_with_cache
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 432, in compile_with_cache
    return _compile_with_cache_cuda(
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 509, in _compile_with_cache_cuda
    ptx, mapping = compile_using_nvrtc(
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 271, in compile_using_nvrtc
    return _compile(source, options, cu_path,
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 255, in _compile
    ptx, mapping = prog.compile(options, log_stream)
  File "C:\Users\User\AppData\Local\Programs\Python\Python39\lib\site-packages\cupy\cuda\compiler.py", line 635, in compile
    raise CompileException(log, self.src, self.name, options,
cupy.cuda.compiler.CompileException: Catastrophic error: cannot open source file "C:\Users\User\AppData\Local\Temp\tmprosp_cev\587d834fef5a82250d88756cc66d608b_2.cubin.cu"

1 catastrophic error detected in the compilation of "C:\Users\User\AppData\Local\Temp\tmprosp_cev\587d834fef5a82250d88756cc66d608b_2.cubin.cu".
Compilation terminated.

補足情報（FW/ツールのバージョンなど）

windows 10
Python 3.9.5
cupy-cuda112 9.0.0

>>> import cupyx
>>> print(cupyx.get_runtime_info())
OS                           : Windows-10-10.0.19041-SP0
CuPy Version                 : 9.0.0
NumPy Version                : 1.20.1
SciPy Version                : 1.6.1
Cython Build Version         : 0.29.23
Cython Runtime Version       : 0.29.23
CUDA Root                    : C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v11.3
CUDA Build Version           : 11020
CUDA Driver Version          : 11030
CUDA Runtime Version         : 11030
cuBLAS Version               : 11402
cuFFT Version                : 10402
cuRAND Version               : 10204
cuSOLVER Version             : (11, 1, 1)
cuSPARSE Version             : 11500
NVRTC Version                : (11, 3)
Thrust Version               : 101000
CUB Build Version            : 101000
Jitify Build Version         : 60e9e72
cuDNN Build Version          : 8101
cuDNN Version                : 8101
NCCL Build Version           : None
NCCL Runtime Version         : None
cuTENSOR Version             : 10202
cuSPARSELt Build Version     : None
Device 0 Name                : NVIDIA Quadro K620
Device 0 Compute Capability  : 50
Device 0 PCI Bus ID          : 0000:01:00.0

Comments

[jbpb0]

> cannot open source file "C:\Users\User\AppData\Local\Temp\tmpyi95wkqt\df1479848d067b9d322bed29495eb57e_2.cubin.cu"

ユーザー名(上記の「User」のところの実際)に、日本語とかスペースとか記号とかが入ってませんでしょうか？
(そういうものが入ってたらダメかは分かりませんが)

[jbpb0]

> CUDA toolkit 11.3をインストールし、python3.9.5にてCupyを実行

下記を見ても、precompiled binaryはCUDA 11.2用までで、11.3用は用意されてないみたいですが、どのようにしてインストールしたのでしょうか？
https://pypi.org/project/cupy/

また、下記を見ると、正式にサポートされてるCUDAは11.2までのようです
https://docs.cupy.dev/en/stable/install.html

[yutatayu]

jbpb0様へ

確かにUserには日本語名である漢字が入っています。
User（日本語名）を変えて試してみたいと思います。

[yutatayu]

jbpb0様へ

CUDA toolkit 11.3がwindows10システムにインストールされています。
ご記載のURLからCUDA toolkitをバージョン11.3から11.2へダウングレードを行い、動作確認したいと思います。

[jbpb0]

CUDAのバージョン違いが、この質問のエラーの原因ではないとしても、他に何か支障が生じるかもしれないので、可能であればバージョンは正式にサポートされてるものに合わせることをお勧めします

[yutatayu]

jbpb0様へ

ご返答、誠にありがとうございました。
CUDA toolkitをバージョン11.3から11.2へダウングレードを行いました。
また、ユーザー名を日本語名（漢字）から英文字に切り替えるために、新たにユーザーアカウントを作成しました。
結果として、正常動作いたしました。

```Python

Python 3.9.5 (tags/v3.9.5:0a7dcbd, May 3 2021, 17:27:52) [MSC v.1928 64 bit (AMD64)] on win32
Type "help", "copyright", "credits" or "license" for more information.
>>> import cupy,cupyx
>>> a=cupy.array([[1,2],[2,1]])
>>> b=cupy.array([[1.,2.],[2.,1.]])
>>> a+b
array([[2., 4.],
[4., 2.]])
>>> a*b
array([[1., 4.],
[4., 1.]])
>>> print(cupyx.get_runtime_info())
OS : Windows-10-10.0.19041-SP0
CuPy Version : 9.0.0
NumPy Version : 1.20.3
SciPy Version : 1.6.3
Cython Build Version : 0.29.23
Cython Runtime Version : 0.29.23
CUDA Root : C:\Program Files\NVIDIA GPU Computing Toolkit\CUDA\v11.2
CUDA Build Version : 11020
CUDA Driver Version : 11030
CUDA Runtime Version : 11020
cuBLAS Version : 11301
cuFFT Version : 10400
cuRAND Version : 10203
cuSOLVER Version : (11, 0, 2)
cuSPARSE Version : 11301
NVRTC Version : (11, 2)
Thrust Version : 101000
CUB Build Version : 101000
Jitify Build Version : 60e9e72
cuDNN Build Version : 8101
cuDNN Version : 8101
NCCL Build Version : None
NCCL Runtime Version : None
cuTENSOR Version : 10202
cuSPARSELt Build Version : None
Device 0 Name : NVIDIA Quadro K620
Device 0 Compute Capability : 50
Device 0 PCI Bus ID : 0000:01:00.0

```

Answer 1

CUDA toolkit 11.3 から CUDA toolkit 11.2へダウングレードする

CUDA toolkit 11.2 archive

ユーザーを新たに作成する

Windows 10 でローカルのユーザー アカウントまたは管理者アカウントを作成する

新しいユーザーでPython3.9.5をインストールする

Python.org

以上で正常動作しました。