python一行ずつファイルを読み込みたい

Question

やりたいこと

pythonでファイルを一行ずつ読み込み処理をしたいです。そこでreadlinesを使おうと思うのですがAttributeError: 'list' object has no attribute 'strip'というエラーが出てしまいます。
read()の時は読み込めます。

ソースコード

import json
import codecs
from janome.tokenizer import Tokenizer

t=Tokenizer()
page = codecs.open('page.jl','r','utf-8')
text = page.readlines()
result = open('result.txt','w')
tokens = t.tokenize(text)
for token in tokens:
	print(token)
	result.write(str(token))
	result.write('\n')
page.close()

エラーメッセージ

>python word.py
Traceback (most recent call last):
  File "word.py", line 10, in <module>
    tokens = t.tokenize(text)
  File "C:\Users\ogawa\Anaconda3\envs\abst\lib\site-packages\janome\tokenizer.py", line 204, in tokenize
    return list(self.__tokenize_stream(text, wakati, baseform_unk, ''))
  File "C:\Users\ogawa\Anaconda3\envs\abst\lib\site-packages\janome\tokenizer.py", line 207, in __tokenize_stream
    text = text.strip()
AttributeError: 'list' object has no attribute 'strip'

追記

text = page.readlines()のあとにprint(text)をうつと読み込むファイルpage.jlの中身がそのまま出てきます。page.jlのなかみは日本語のニュースサイトの記事本文です
print(type(text))で型を調べるとリスト型でした
エラーについてはtokenizeにリスト型を入れたからだとわかりました。
リストの中身をひとつづつtokenizeに渡したいです。

Answer 1

import json
import codecs
from janome.tokenizer import Tokenizer

t=Tokenizer()
page = codecs.open('page.jl','r','utf-8')
result = open('result.txt','w')
text = page.readlines()
for line in text:
    tokens = t.tokenize(line)
    for token in tokens:
        print(token)
        result.write(str(token))
        result.write('\n')

page.close()
result.close()

多分こうだと思います。

page.readlines()はリストを返していると思うので。

Comments

[abokadoishii]

回答ありがとうございます。
それでも同じエラーが出てしまいます

[y_waiwai]

ああ、
tokens = t.tokenize(text)
は、
tokens = t.tokenize(line)
では

[nerianighthawk]

tokens = t.tokenize(text)
の行のtokenizeの引数が結局textのままになってしまっています。
このコードであればlineにする必要があるかと思います。

[退会済みユーザー]

ほんとですね。
直しておきます

Answer 2

readlinesは問題なくうまく行っていると思います。
tokenize(text)がうまく行っていません。
tokenize関数の中でtextに対してstripと言う関数を呼び出そうとしてエラーが出ています。
したがって、readlinesで取ってきたものではtokenizeはできません。
普通にfor文で回すのがいいのではないでしょうか。

Comments

[abokadoishii]

for文でリスト要素をひとつづつ入れたら解決しました

Answer 3

text = page.readlines()

のあとに、
print(text)
を入れて何がでてくるか提示してみてください。

Comments

[abokadoishii]

回答ありがとうございます。
リスト形式で入れられたpage.jlの中身が出てきます。

[y_waiwai]

それを提示してくださいな。

Answer 4

python3 readline
で google 検索してみましたか？

例

• python: ファイルの読み込み–read()、readlines()、readline()

https://openbook4.me/projects/147/sections/885

Comments

[abokadoishii]

googleで検索してもエラーに対する有効的な手段は見つけられなかった為質問してみました。

[katoy]

今のケースでは、エラー対処より readlines() の使い方を調べることが近道です。

> ... googleで検索しても ...
どんな検索顔を試みましか？