常連

### 前提・実現したいこと

プログラミング初心者なのですがpythonで文章の名詞と動詞を種類ごとに辞書に格納していきその数を数え、それをpickleに保存していくソースコートを作りたいです。
TypeError: list indices must be integers or slices, not tuple
というエラーが発生してしまいます。
どうしたら、このエラーが出ずに正常にコードを動かすことができるでしょうか？

### 発生している問題・エラーメッセージ

```
File "/Applications/MAMP/卒業研究/データ収集プログラム.py", line 38, in <module>
    mydict[token.surface,token.feature] += 1
TypeError: list indices must be integers or slices, not tuple
```

### 該当のソースコード

```python
#!/usr/bin/python
# -*- coding: utf-8 -*-

import CaboCha
import pprint
import pickle

# c = CaboCha.Parser("");
c = CaboCha.Parser("")

mydict = {}

pickle_in = open('/Users/k16095kk/mydict.pickle','rb')
mydict = pickle.load(pickle_in)


sentence = "帽子を返す 帽子を返す 帽子を返す"

#print c.parseToString(sentence)

#tree =  c.parse(sentence)
#
tree =  c.parse(sentence)

for i in range(tree.token_size()):
    token = tree.token(i)
    print (' Normalized:', token.normalized_surface)
    print (' Feature:', token.feature)
    if ('動詞') in token.feature:
     if (token.surface, token.feature) not in mydict:
      mydict[token.surface,token.feature] = 1
     else:
      mydict[token.surface,token.feature] += 1
    if ('名詞') in token.feature:
     if (token.surface, token.feature) not in mydict:
      mydict[token.surface,token.feature] = 1
     else:
      mydict[token.surface,token.feature] += 1
    pickle_out = open('/Users/k16095kk/mydict.pickle','wb')
    pickle.dump(mydict, pickle_out)
    pprint.pprint(mydict)
    pickle_out.close()
    print ()

```

### 試したこと

調べてみてもなにを試したらいいかわからなかったのでなにも試せてないです

### 補足情報（FW/ツールのバージョンなど）
mecab
Cabocha

pythonでTypeError: list indices must be integers or slices, not tupleというエラーが出てしまいます。

## テーマ、知りたいこと

スクレイピングの法的性について

## 背景、状況

大学の研究でサイトのレビューをスクレイピングにて取得したいのですが、法律的に大丈夫ですかね。。
ご意見いただけると幸いです。

## 補足情報
レビューに使用したいのは以下のサイトです。
[映画.com利用規約](https://eiga.com/info/kiyaku/)



スクレイピングの法的性について

mecabをインストールして簡単なテストコードでうまく機能しているか確認したところ
`runtimeerror`が発生していてなかなか解決できません。
いろいろ調べてみて、[こちらのページ](https://github.com/SamuraiT/mecab-python3/issues/59)が一番解決に近いと思ったのですが、当方プログラミング初心者のため理解できず、立ち往生している状態です。
具体的に何をどうすれば良いかご教授いただけますでしょうか。



### 発生している問題・エラーメッセージ

```
Traceback (most recent call last):
  File "/Users/user/.pyenv/versions/3.9.4/lib/python3.9/site-packages/MeCab/__init__.py", line 133, in __init__
    super(Tagger, self).__init__(args)
RuntimeError

The above exception was the direct cause of the following exception:

Traceback (most recent call last):
  File "/Users/user/github/me-cab/mecab.py", line 27, in <module>
    mecab = MeCab.Tagger ("-Ochasen")
  File "/Users/user/.pyenv/versions/3.9.4/lib/python3.9/site-packages/MeCab/__init__.py", line 135, in __init__
    raise RuntimeError(error_info(rawargs)) from ee
RuntimeError: 
----------------------------------------------------------

Failed initializing MeCab. Please see the README for possible solutions:

    https://github.com/SamuraiT/mecab-python3#common-issues

If you are still having trouble, please file an issue here, and include the
ERROR DETAILS below:

    https://github.com/SamuraiT/mecab-python3/issues

issueを英語で書く必要はありません。

------------------- ERROR DETAILS ------------------------
arguments: -Ochasen
[ifs] no such file or directory: /Users/user/.pyenv/versions/3.9.4/lib/python3.9/site-packages/unidic/dicdir/mecabrc
----------------------------------------------------------
```

### 該当のソースコード

```python
import MeCab

mecab = MeCab.Tagger ("-Ochasen")
testwords = "今日の天気は晴れです。"
print(mecab.parse(testwords))
```

### mecabまわりでインストールしたものとそのバージョン

```
mecab of 0.996
mecab-ipadic-NEologd
swig 4.0.2 
mecab-python3 

```

mecabでRuntimeErrorが起こる

###前提・実現したいこと
自然言語処理のプログラムをpythonで書いています。エラーを消したいです。

###発生している問題・エラーメッセージ
エラーは文字コード関連です。ちなみにこのエラーは何度も実行しているとたまにエラーが出ないでプログラムが動くことがあります。
```
line 115, in tokenize
    yield node.surface.lower()
UnicodeDecodeError: 'utf-8' codec can't decode bytes in position 1-2: invalid continuation byte

```

###該当のソースコード
```python
def tokenize(self,text):#形態素解析して名詞だけ取り出す

        sentence = str(text)
        node = self.mecab.parseToNode(sentence)

        while node:
            if node.feature.split(',')[0] == '名詞':
                yield node.surface.lower()
            node = node.next
```

###試したこと
エンコードやデコードを試しましたが無理でした。それに、何回か実行すれば通ってしまうことがあるのが不思議です。

###補足情報(言語/FW/ツール等のバージョンなど)
使っているバージョンはpython3.6.1です。
OSはMacのSierraです。

pythonの文字コード系のエラーで困っています。

自然言語処理の勉強のためM1macにGINzaをインストールしようと思い、ターミナルで
```terminal
pip install -U ginza ja-ginza-electra
```
を実行したところ、
```ここに言語を入力
Building wheel for SudachiPy (pyproject.toml) did not run successfully.
exit code: 1
```

```ここに言語を入力
ERROR: Failed building wheel for SudachiPy
  Building wheel for spacy-alignments (pyproject.toml) ... error
  error: subprocess-exited-with-error
```
```ここに言語を入力
Building wheel for spacy-alignments (pyproject.toml) did not run successfully.
exit code: 1
```
```ここに言語を入力
ERROR: Could not build wheels for SudachiPy, spacy-alignments, tokenizers, which is required to install pyproject.toml-based projects
```
こういったエラーが出てインストールができない状況となっております。
このエラーを解消するにはどのような方法がございますでしょうか。
なお、環境はcondaの仮想環境でpythonは3.9（M1チップ用）です。


GINZAのインストール時のエラーについて



### 環境
OS　windows11 バーション21H2
Python 3.8.10[MSC v.1928 64 bit (AMD64)] on win32
mecab of 0.996

### コード
```ここに言語を入力
import MeCab
tagger = MeCab.Tagger()
print(tagger.parse('今日は自然言語処理をするための環境構築をおこないます。'))
```

### エラーメッセージ
```ここに言語を入力
Traceback (most recent call last):
  File "c:/Users/Owner/Desktop/python/hello.py", line 1, in <module>
    import MeCab
  File "C:\Users\Owner\AppData\Local\Packages\PythonSoftwareFoundation.Python.3.8_qbz5n2kfra8p0\LocalCache\local-packages\Python38\site-packages\MeCab\__init__.py", line 10, in <module>
    from . import _MeCab
ImportError: DLL load failed while importing _MeCab: 指定されたモジュールが見つかりません。
```

現状
・システム環境変数のpathに「C:\Program Files\MeCab\bin」を設定
・pip install mecab-python3でパッケージインストール
これまでに試したこと
・[https://teratail.com/questions/351366](url)を参考に、
１．\Python38\site-packages\MeCabの削除、動作確認(同じエラー文)→元に戻す
２．pip uninstall mecab-python3
３．libmecab.dllをsite-packages下にコピーで動作確認(同じエラー文)、その後削除
４．pip install mecab-python3 unidic-lite





「ImportError: DLL load failed while importing _MeCab: 指定されたモジュールが見つかりません。」の解決方法について

### ????pythonでインプットデータの説明変数の列全体の先頭に文字列を追加する方法

    name  categoryId
0    a       100
1    b       210
2    c        60
↓
    name  categoryId
0    a      category_100
1    b      category_210
2    c       category_60

のようにインプットデータの先頭に文字をつけたいです。
pandasでデータフレームを作成し、インプットデータに挿入する方法でお願いいたします。

python、プログラミング初心者で基本的なこともまだわかりません。
分かる方いらっしゃいましたらご教授よろしくお願いいたします。

python 説明変数の先頭に文字列を挿入する方法。

### 実現したいこと

・`python-mecab3`に辞書パス（NEologd）を通したい
・Django Webフレームワークにおいて、`python-mecab3`と辞書`mecab-unidic-neologd`を用いた形態素解析アプリを開発したい


### 前提

・Django Webフレームワークにて、`pyhon-mecab3`と`mecab-unidic-neologd`を用いたアプリを開発している
・Django テスト環境では問題なく辞書パス（NEologd）が通り、期待通りの形態素解析ができる
　・`pip install unidic-lite`をインストールしているため、`mecab = MeCab.Tagger()`の場合は問題なく稼働する

・Docker環境になると、表題の通り、辞書パスが通らずに下記のエラーが発生する
・辞書パス（NEologd）を指定しない場合は、Docker環境上でも形態素解析が行えるが、期待された結果にならない
・辞書データについては`/reviewer/mecab/dic/mecab-unidic-neologd`に格納している

### 発生している問題・エラーメッセージ

・Docker環境上で、下記のコードを実行した場合、`mecab-python3`に辞書パス（NEologd）が通らずに、下記のエラーを吐き出す

```Djangoデバッグで表示されたエラー
RuntimeError at /
----------------------------------------------------------

Failed initializing MeCab. Please see the README for possible solutions:

    https://github.com/SamuraiT/mecab-python3#common-issues

If you are still having trouble, please file an issue here, and include the
ERROR DETAILS below:

    https://github.com/SamuraiT/mecab-python3/issues

issueを英語で書く必要はありません。

------------------- ERROR DETAILS ------------------------
arguments: -d /django/reviewer/mecab/dic/mecab-unidic-neologd
[pos != std::string::npos] format error: 
----------------------------------------------------------
Request Method:	POST
Request URL:	http://localhost:8000/
Django Version:	4.1.4
Exception Type:	RuntimeError
Exception Value:	
----------------------------------------------------------

Failed initializing MeCab. Please see the README for possible solutions:

    https://github.com/SamuraiT/mecab-python3#common-issues

If you are still having trouble, please file an issue here, and include the
ERROR DETAILS below:

    https://github.com/SamuraiT/mecab-python3/issues

issueを英語で書く必要はありません。

------------------- ERROR DETAILS ------------------------
arguments: -d /django/reviewer/mecab/dic/mecab-unidic-neologd
[pos != std::string::npos] format error: 
----------------------------------------------------------
Exception Location:	/usr/local/lib/python3.10/site-packages/MeCab/__init__.py, line 135, in __init__
Raised during:	reviewer.views.home_view
Python Executable:	/usr/local/bin/python
Python Version:	3.10.10
Python Path:	
['/django',
 '/usr/local/lib/python310.zip',
 '/usr/local/lib/python3.10',
 '/usr/local/lib/python3.10/lib-dynload',
 '/usr/local/lib/python3.10/site-packages']
Server time:	Sat, 18 Feb 2023 19:11:28 +0900
```

なお、通常ドキュメントに記載されていた通り、パスが通らない場合は、以下の通り`[ifs] no such file or directory`と表示される。（パス自体はDjangoテスト環境で通っている。）

```パスが通らない場合のエラー
------------------- ERROR DETAILS ------------------------
arguments: -d /django/reviewer/mecab/dic
[ifs] no such file or directory: /django/reviewer/mecab/dic/dicrc
----------------------------------------------------------
```

エラーに`[pos != std::string::npos] format error: `と表示されていることが関係していると推測される。

### 該当のソースコード

```python
def mecab_text(text):
    # MeCabのインスタンスを作成（辞書はmecab-ipadic-neologdを使用）
    # dicdir = "-d ./reviewer/mecab/dic/mecab-unidic-neologd"  # Djangoテスト環境上でのパス
    dicdir = "-d /django/reviewer/mecab/dic/mecab-unidic-neologd"
    mecab = MeCab.Tagger(dicdir)

    # 形態素解析
    node = mecab.parseToNode(text)

    # 形態素解析した結果を格納するリスト
    wordlist = []

    while node:
        # 名詞のみリストに格納する
        if node.feature.split(",")[0] == "名詞":
            wordlist.append(node.surface)
        # 形容詞を取得、elifで追加する
        elif node.feature.split(",")[0] == "形容詞":
            wordlist.append(node.surface)
        # 動詞を取得、elifで追加する
        # elif node.feature.split(',')[0] == '動詞':
        #    wordlist.append(node.surface)
        node = node.next
    return wordlist

```


```docker
FROM python:3.10-buster
ENV PYTHONBUFFERED=1

WORKDIR /django
COPY requirements.txt requirements.txt

RUN pip3 install -r requirements.txt
COPY . .

CMD python manage.py runserver 0.0.0.0:8000
```

```yml
version: "3.10"
services:
  app:
    build: .
    volumes: 
     - .:/django
    ports:
     - 8000:8000
    image: ez-app-reviewer-repository:latest
    container_name: django_container
    command: python manage.py runserver 0.0.0.0:8000
```

### 試したこと

・python-mecab3のドキュメントの通読
　https://github.com/SamuraiT/mecab-python3
・先行事例の検索
・Dockerfileの書き換え
・ChatGPTへの質問

### 最後に

一日ほど方法を探しましたが、解決策が見つかりませんでしたので質問させていただきました。
お手数ではございますが、何卒よろしくお願いいたします。
