jupyterで日本語を入力すると全て?に置き換わってしまう

Question

jupyterでpython2.7を使用しプログラムを作成していたのですが
raw_inputを使用し日本語を入力すると全て?になってしまいます。

どうすれば日本語を認識できるのでしょうか

Answer 1

Win10+Anaconda+2.7のJupyter Notebook上で実行してみました。

• raw_inputの引数(プロンプト)はstr型(shift-jis)で与える。
• raw_inputの結果はstr型(shift-jis)で返るのでunicode型に変換して表示する。

とすると、とりあえずは正常に入出力できるようになりました。

ただ、python2の文字の扱いが複雑なうえにNotebook上(html)でも文字コードの絡みがあるので
さらにややこしいことになっているようです。
Jupyterはpython3で利用したほうがよいかと思います。

# -*- coding: utf-8 -*-
import sys

# 確認 なぜか標準入力がNone
print('stdin:' + str(sys.stdin.encoding))
print('stdout:' + str(sys.stdout.encoding))
print('default:' + sys.getdefaultencoding())

# unicode型は正常に表示
s_uni = u'あいう'
print(s_uni)
print(type(s_uni))
print(repr(s_uni))

# str型(utf-8)は正常に表示
s_utf8 = us.encode('utf-8')
print(s_utf8)
print(type(s_utf8))
print(repr(s_utf8))

# str型(sjis)は文字化け
s_sjis = us.encode('shift-jis')
print(s_sjis)
print(type(s_sjis))
print(repr(s_sjis))

# プロンプトはstr型(sjis)で渡さないと文字化け
inp = raw_input(s_sjis)
# 入力結果はstr型(sjis)
print(type(inp))
print(repr(inp))

# str型(sjis)をunicode型に変換
inp = unicode(inp,'shift-jis')

# 正常に表示できる
print(inp)
print(type(inp))
print(repr(inp))

# str型(utf8)でも正常に表示できる
inp = inp.encode('utf-8')
print(inp)
print(type(inp))
print(repr(inp))

結果 ※入力は「かきく」を与えた

stdin:None
stdout:UTF-8
default:ascii
あいう
<type 'unicode'>
u'\u3042\u3044\u3046'
あいう
<type 'str'>
'\xe3\x81\x82\xe3\x81\x84\xe3\x81\x86'
������
<type 'str'>
'\x82\xa0\x82\xa2\x82\xa4'
あいうかきく
<type 'str'>
'\x82\xa9\x82\xab\x82\xad'
かきく
<type 'unicode'>
u'\u304b\u304d\u304f'
かきく
<type 'str'>
'\xe3\x81\x8b\xe3\x81\x8d\xe3\x81\x8f'

Comments

[program1111]

丁寧な回答ありがとうございます。
無事に解決しました！

Answer 2

testinは、Python 2 の str になると思います。(Unicodeではなく)

Unicodeリテラル（u"")で、raw_inputに日本語を与えてエラーになっていないのですが、raw_inputに与えるプロンプト出力用文字列は、 str で与えたほうが良いと思います。
http://docs.python.jp/2/library/functions.html#raw_input

Python 2で学習するなら、 str / unicode の変換、内部データを意識する必要があります。
Python 3では、これらの多くの問題が解決されています。

ちなみに、以下はどうなりますか？

以下を実行するとどうなりますか？

import sys
sys.getdefaultencoding()

'ascii' と出てきませんか？

Comments

[program1111]

回答ありがとうございます。
実行してみたところasciiと表示されました。