質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.87%

  • Python

    6297questions

    Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

  • Python 3.x

    4793questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

  • Jupyter

    163questions

  • 自然言語処理

    81questions

    自然言語処理は、日常的に使用される自然言語をコンピューターに処理させる技術やソフトウェアの総称です。

形態素解析をして名詞のみの単語リストをつくるときのエラー

解決済

回答 1

投稿 編集

  • 評価
  • クリップ 0
  • VIEW 93

harunouta

score 62

 前提・実現したいこと

形態素解析をして、リストに入っている形容詞や形容動詞などを含む単語を
名詞のみの単語リストにしようとしています。

 発生している問題・エラーメッセージ

最終的に得たいのは以下のリストですが、

ans = ['beef', 'chicken', 'meat', 'pork']

現状のコードだと以下のエラーが出てしまうため、

---------------------------------------------------------------------------
ValueError                                Traceback (most recent call last)
<ipython-input-38-45defa4ddf68> in <module>()
      1 for word in result:
      2     s = {'NN', 'NNP', 'NNPS', 'NNS'}
----> 3     selected_wordsets.append( [(word, tag) for word, tag in result if tag in s])
      4 selected_wordsets
      5 

<ipython-input-38-45defa4ddf68> in <listcomp>(.0)
      1 for word in result:
      2     s = {'NN', 'NNP', 'NNPS', 'NNS'}
----> 3     selected_wordsets.append( [(word, tag) for word, tag in result if tag in s])
      4 selected_wordsets
      5 

ValueError: not enough values to unpack (expected 2, got 1)


 File "<ipython-input-39-74a608359c14>", line 2
    ans.append(word for word, tag in selected_wordsets])
                                                      ^
SyntaxError: invalid syntax


どのように修正すれば良いかアドバイスをいただきたいです。

 該当のソースコード

words = ['beef', 'boiled chicken', 'processed meat', 'pork']

result = []
selected_wordsets = []
ans = []
import nltk
for word in words:
    result.append(nltk.pos_tag(nltk.word_tokenize(word)))
result

for word in result:
    s = {'NN', 'NNP', 'NNPS', 'NNS'}
    selected_wordsets.append( [(word, tag) for word, tag in result if tag in s])
selected_wordsets

for word in selected_wordsets:
    ans.append(word for word, tag in selected_wordsets])
ans

出力

#result
[[('beef', 'NN')],
 [('boiled', 'VBN'), ('chicken', 'NN')],
 [('processed', 'VBN'), ('meat', 'NN')],
 [('pork', 'NN')]]

 試したこと

形態素解析を行った後、名詞のみを取り出してリストに加えることはできています。

import nltk
result = nltk.pos_tag(nltk.word_tokenize("The beauties of nature"))
result

s = {'NN', 'NNP', 'NNPS', 'NNS'}
selected_wordsets = [(word, tag) for word, tag in result if tag in s]
selected_wordsets

ans = [word for word, tag in selected_wordsets]
ans

出力

[('The', 'DT'), ('beauties', 'NNS'), ('of', 'IN'), ('nature', 'NN')]

[('beauties', 'NNS'), ('nature', 'NN')]

['beauties', 'nature']

追記

以下のコードを実行すると求めたい出力を得ることはできましたが、
少々冗長なので、どうすればより効率の良いコードになるか教えていただきたいです。

words = ['beef', 'boiled chicken', 'processed meat', 'pork']

result = []
selected_wordsets = []
ans_wordsets = []
import nltk
for word in words:
    result.extend(nltk.pos_tag(nltk.word_tokenize(word)))
    print(word)

for word in result:
    s = {'NN', 'NNP', 'NNPS', 'NNS'}
    selected_word = [(word, tag) for word, tag in result if tag in s]
    selected_wordsets.extend(selected_word)
    break;
selected_wordsets

for word in selected_wordsets:
    ans_word =[word for word, tag in selected_wordsets]
    ans_wordsets.extend(ans_word)
    break;
ans_wordsets

 補足情報(FW/ツールのバージョンなど)

Python 3.6

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 1

checkベストアンサー

+1

とても初歩的な問題です。resultansもループが回るたびに再代入してるから、最後に代入した値が残ります。

こう書いているのと同じことですから。

word = 'beef'
result = nltk.pos_tag(nltk.word_tokenize(word))
s = {'NN', 'NNP', 'NNPS', 'NNS'}
selected_wordsets = [(word, tag) for word, tag in result if tag in s]
ans = [word for word, tag in selected_wordsets]

word ='boiled chicken'
result = nltk.pos_tag(nltk.word_tokenize(word))
s = {'NN', 'NNP', 'NNPS', 'NNS'}
selected_wordsets = [(word, tag) for word, tag in result if tag in s]
ans = [word for word, tag in selected_wordsets]

word = 'processed meat'
result = nltk.pos_tag(nltk.word_tokenize(word))
s = {'NN', 'NNP', 'NNPS', 'NNS'}
selected_wordsets = [(word, tag) for word, tag in result if tag in s]
ans = [word for word, tag in selected_wordsets]

word = 'pork'
result = nltk.pos_tag(nltk.word_tokenize(word))
s = {'NN', 'NNP', 'NNPS', 'NNS'}
selected_wordsets = [(word, tag) for word, tag in result if tag in s]
ans = [word for word, tag in selected_wordsets]

見直しが足りなくて気づかなかったのなら、teratailで質問する前にもう少し自分で粘るようにしましょう。

素でわかっていないのなら、さすがに実力不足だと思うので、入門書的なところからやり直すしかないと思います。

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2018/07/11 11:35 編集

    エラー文の追記と現状のコードの修正をいたしました。
    初歩的であることは理解していますが、どうしても繰り返しとデータ構造が苦手な場合、易しい入門書だと身に付かなかったため、Pythonだとどの本が良いのでしょうか。教えていただけますとありがたいです。

    キャンセル

  • 2018/07/11 12:19

    内包のループはword(resultの子リスト)に対して回すのでは? それと、appendよりextendの方が良いでしょう
    入門書は、とりあえず私は自分が何を読んだかの記憶はほとんどないし、かつて読んだ本が今通用するとも思えないので、ググってよさげなのを探してください
    あとは公式ドキュメントのチュートリアルとかでも良いでしょうし、python入門的なページもweb上にたくさんあります
    とりあえず公式のチュートリアル
    https://docs.python.jp/3/tutorial/

    キャンセル

  • 2018/07/11 20:48 編集

    お返事とアドバイスをいただきましてありがとうございます。追記に現状を追加させていただきました。可能でしたら、何かヒントをいただけますと幸いです。追記に明記いたしましたコードを実行すると求めたい出力を得ることはできましたが、少々冗長なので、どうすればより効率の良いコードになるか教えていただきたいです。

    キャンセル

  • 2018/07/12 12:18

    内包で回すなら下の2つのforは要らないのでは

    キャンセル

  • 2018/07/12 15:51

    ありがとうございました。

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.87%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

同じタグがついた質問を見る

  • Python

    6297questions

    Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

  • Python 3.x

    4793questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

  • Jupyter

    163questions

  • 自然言語処理

    81questions

    自然言語処理は、日常的に使用される自然言語をコンピューターに処理させる技術やソフトウェアの総称です。