回答編集履歴
1
インデントを訂正
answer
CHANGED
@@ -4,10 +4,10 @@
|
|
4
4
|
|
5
5
|
```Python
|
6
6
|
t = Tokenizer() # Tokenizerの初期化は一回だけでOKです。
|
7
|
-
|
7
|
+
for text in ids:
|
8
|
-
|
8
|
+
for token in t.tokenize(text):
|
9
|
-
|
9
|
+
data.append(token.surface)
|
10
|
-
|
10
|
+
print(data)
|
11
11
|
```
|
12
12
|
|
13
13
|
■余談
|