インプレス社の書籍「Marketing Python P253~」を参照しながら、自分がWEBサイトから抽出したコメント文を形態素解析しようとしているのですが、全てのコメントを抽出して解析する所で「'float' object has no attribute 'strip'」と出てしまいます。
(一つのコメントを解析する事はできました)
データフレームから抽出しない列も含めて、float型を削除しても出てしまいます。
python
1import pandas as 2df=pd.read_csv('feed.csv',encoding='cp932') 3df.dtypes #全てobject型である事を確認 4from janome.tokenizer import Tokenizer 5t=Tokenizer() 6#以下2行はお試しで解析できることを確認 7for tokens in t.tokenize('この手の話は10年前からありますね。血液に比べて'): 8 print(tokens) 9 10samp=df['コメント'][2] 11#3行目に限定して抽出。以下6行は名詞で且つ一般名詞などに限定できる事を確認 12words=[] 13for token in t.tokenize(samp): 14 if (token.part_of_speech.split(',')[0] == '名詞')&(token.part_of_speech.split(',')[1]in['一般','固有名詞','サ変動詞','形容動詞語幹']): 15 words.append(token.surface) 16words 17 18#全てのコメントを抽出しようとして以下がエラーとなる 19words_list=[] 20for com in df['コメント']: 21 words=[] 22 for token in t.tokenize(com): 23 if (token.part_of_speech.split(',')[0] == '名詞')&(token.part_of_speech.split(',')[1]in['一般','固有名詞','サ変動詞','形容動詞語幹']): 24 words.append(token.surface) 25 words_list.append(words) 26words_list 27 28 29#表示されるエラー 30--------------------------------------------------------------------------- 31AttributeError Traceback (most recent call last) 32<ipython-input-13-5ee93336e7ac> in <module> 33 2 for com in df['コメント']: 34 3 words=[] 35----> 4 for token in t.tokenize(com): 36 5 if (token.part_of_speech.split(',')[0] == '名詞')&(token.part_of_speech.split(',')[1]in['一般','固有名詞','サ変動詞','形容動詞語幹']): 37 6 words.append(token.surface) 38 39~\anaconda3\lib\site-packages\janome\tokenizer.py in __tokenize_stream(self, text, wakati, baseform_unk, dotfile) 40 215 41 216 def __tokenize_stream(self, text, wakati, baseform_unk, dotfile): 42--> 217 text = text.strip() 43 218 text_length = len(text) 44 219 processed = 0 45 46AttributeError: 'float' object has no attribute 'strip' 47 48----- 49<ご参考> 抽出した元データ 50![イメージ説明](393bd87b361b622a7147c342fe103a70.jpeg)
回答1件
あなたの回答
tips
プレビュー