形態素解析器:janome テキスト前の「u」

Question

形態素解析器のjanomeを使ってみようと思い、ホームページの使い方のところを見てみたのですが、

from janome.tokenizer import Tokenizer
t = Tokenizer()
for token in t.tokenize(u'すもももももももものうち'):
    print(token)

このコードの３行目のところのテキストの前の「u」を書かなくても問題なく動作したのですが、「u」にはどんな意味があるのでしょうか。

Answer 1

Unicode リテラルです。
Python2.xでは文字列にはstr型とUnicode型と別の型がありましたが、3.xではこの区別はなくstr型に統一されました。よって3.xのコードではuをつけなくてもよいです。
ただし、コードの互換性を保つために、付けることも許されています。
参考：https://docs.python.jp/3/reference/lexical_analysis.html#string-and-bytes-literals

Comments

[shozin_0805]

python2.xを使ったことがないので知りませんでした。
詳しく教えていただきありがとうございます。

Answer 2

Python2.x系ではunicode文字列を表す時にu'あいう'のようにしましたが、Python3では不要のため、変化がないのだと思います。
参考リンク

Comments

[shozin_0805]

ありがとうございます。

Answer 3

https://qiita.com/megmogmog1965/items/e2f633ac445831568975

ユニコード指定する場合に使います。

最近の話もまとめてあるもの。
https://qiita.com/miyagaw61/items/0e8cc40d95bf6236729e

Comments

[shozin_0805]

ありがとうございます。