Mecabでcsvのデータを一行ずつ読み込み、品詞のカウントをしたい。

Question

前提・実現したいこと

添付ファイルのtweet.csvを読み込みMecabで一行ずつ品詞のカウントをする処理をしてたいと考えています

最終的な出力を↓のようにしたいです
品詞数(右の合計値),名詞,動詞,形容詞,副詞,助詞,接続詞,助動詞,連体詞,感動詞,*,
31,8,5,2,7,8,3,0,0,0,0,
53,8,8,4,5,8,3,0,0,0,0,

そこで("にわににわにわとりがいる")部分をrowに変えて処理しようとしました。
そうした所、エラー文はないのですが、リストの繰り返し処理がされていない状況です。
初歩的なミスも多いと思いますがよろしくお願いいたします。

発生している問題・エラーメッセージ

該当のソースコード

import MeCab
import csv
import sys

hcount = {}

with open("tweet.csv") as f:
  for row in csv.reader(f):
    row = str(row).lower()#str型に型変換

    dicdir = '-d /usr/lib/x86_64-linux-gnu/mecab/dic/mecab-unidic-neologd'
    mecabTagger = MeCab.Tagger(""+ dicdir) #("-Ochasen" + mecab-unidic-neologd)
    node = mecabTagger.parseToNode(row) 

while node:
    hinshi = node.feature.split(",")[0]
    if hinshi in hcount.keys():
        freq = hcount[hinshi]
    if hinshi in hcount.keys():
        hcount[hinshi] = freq + 1
    else:
        hcount[hinshi] = 1
    node = node.next
for key,value in hcount.items():
     #print(key+":"+str(value))
     print(hcount)

出力

{'BOS/EOS': 2, '補助記号': 6, '名詞': 8, '記号': 5}
{'BOS/EOS': 2, '補助記号': 6, '名詞': 8, '記号': 5}
{'BOS/EOS': 2, '補助記号': 6, '名詞': 8, '記号': 5}
{'BOS/EOS': 2, '補助記号': 6, '名詞': 8, '記号': 5}

補足情報（FW/ツールのバージョンなど）

google colaboratoryを使用しています。

Comments

[quickquip]

エラーが出たコードを貼りましょう（row = str(row).lower() が無かったんじゃないの? という疑念を捨てきれません）

[saiy]

ご指摘の通り row = str(row).lower()の追加前のエラー文を載せていました。
ありがとうございます

[quickquip]

ということは「エラーはないが希望通りに動いてない」という状況でしょうか。現在のコードと、その結果があるとよいと思います。

Answer 1

while以下のインデントがずれています。
意図したコードは

with open("tweet.csv") as f:
  for row in csv.reader(f):
    row = str(row).lower()#str型に型変換

    dicdir = '-d /usr/lib/x86_64-linux-gnu/mecab/dic/mecab-unidic-neologd'
    mecabTagger = MeCab.Tagger(""+ dicdir) #("-Ochasen" + mecab-unidic-neologd)
    node = mecabTagger.parseToNode(row) 

    hcount = {}

    while node:
        hinshi = node.feature.split(",")[0]
        if hinshi in hcount.keys():
            freq = hcount[hinshi]
        if hinshi in hcount.keys():
            hcount[hinshi] = freq + 1
        else:
            hcount[hinshi] = 1
        node = node.next

    for key,value in hcount.items():
         print(key, value)

かと。

---

whileの中に無駄があるので直すと

    while node:
        hinshi = node.feature.split(",")[0]
        if hinshi in hcount:
            freq = hcount[hinshi]
            hcount[hinshi] = freq + 1
        else:
            hcount[hinshi] = 1
        node = node.next

という感じでしょうか。（if hinshi in hcount.keys()は辞書が大きさに比例して時間がかかります）

もうちょっとPythonらしくすると

from collections import defaultdict
(略)
    hcount = defaultdict(int)

    while node:
        hinshi = node.feature.split(",")[0]
        hcount[hinshi] += 1
        node = node.next

でしょう。
defaultdict の使用例 の3つめを参考

---

出力部分は

    for values in zip(*hcount.items()):
         print(values)

の方がそれらしいでしょうか。

Comments

[saiy]

非常に参考になりました。遅れましたがベストアンサーにさせていただきます。