常連

自己紹介

### 複数ファイルの連続読み込み、処理

ディレクトリ内の複数のCSVファイルを読み込み、
例えば連番でデータフレーム（名称を可変、変数にしたい※）を作成し、後続処理に進めたい。
※または今後は月次でファイルが増えていく想定のため、データフレームの配列(3次元)に格納する形がよさそう。

python初心者のため、データフレーム名を変数としたり、グローバル化したりするところがまだ分かっていないため考えた処理が実行出来ていません。またはPythonらしい違うアプローチをご教示頂ければありがたいです。

1ディレクトリ内に1か月分、数十ファイル、かつ複数ディレクトリに存在するため閲覧性が非常に悪い状況ですので、今後定型、非定型の分析レポートを作成するために、まとめて処理したいと考えています。ディレクトリ内の複数ファイル名を取得するところは一応出来ています。

ご教示よろしくお願いいたします。

###該当のソースコード
```python

import pandas as pd
#import numpy as np
#import pickle
#import zipfile
import os
import sys


#データ読み込み関数 1ファイルを読み込み
def read_file( i, path, rfile ):
    
   filepath = r"{0}\{1}".format(path,rfile)
   tmp_data = pd.read_csv( filepath,
			   encoding="sjis",
                           nrows=100, #今だけ１００行に制限
                           header=None                    
             		  )

    #カラム名を設定
    tmp_data.columns =['ID', 'name','score']
    # ファイル内に科目名を示す情報がないため列（index）を追加
    tmp_data['nm_filenumber'] = '{0:02d}'.format(i) 
    return tmp_data

##ディレクトリ以下の全ファイルを繰り返し処理
target_dir = r"\\Server\Readonly\ClientA\17年2月"

for i, filename in enumerate( os.listdir(target_dir)):
    print(i, filename )

# ここで展開したファイル名を次々にデータ化したい､このループ内を想定。
# 一旦ループの外で、手入力すると下記の様になる｡

df_01 = read_file( 1, target_dir, r"ClientA_KOKUGO_201702.csv" )
df_02 = read_file( 2, target_dir, r"ClientA_RIKA_201702.csv" )
df_03 = read_GC( 3, target_dir, r"ClientA_SANSU_201702.csv" )
#... 続く

# 後続処理
# 上記データを全て横結合
# 上記データを全て縦結合
```
##環境
現在はwindowsです｡

複数ファイルの連続処理、データフレーム名の変数化を行いたい

現在データ処理をしたく、pythonのpandasを勉強しています。

そこで一つのディレクトリに入っている複数のCSVを次々に読み込んでDataFrameを作りたく、
for文を用いて処理しようとしているのですが、うまく行きません。

当該コードは以下のようになります。



実現したいことを逐一記すと…
import pandas as pd

df**13**_001  = pd.read_csv("**13**_001.csv", header = 1)
df**17**_001  = pd.read_csv("**17**_001.csv", header = 1)
df**19**_001  = pd.read_csv("**19**_001.csv", header = 1)
・・・これが複数続く。

これを処理するために、

list = ["13", "17", "19"]
for i in list:
   "row_df"+i+"_001" = pd.read_csv(""i"_001.csv" , header = 1)

とやっているのですが、うまくいきません。

print("row_df"+i+"_001")

とするとこの部分は処理できているようなので、後半部分が問題だと思います。
どのように記述すれば良いか教えていただけないでしょうか。
このコードの書き方以外にもこう書いたら良いよというのがあれば、よろしくお願い致します。

for文でファイルを連続して読み込みたいのです。

###前提・実現したいこと
A B C
1 1 N
2 3 N
1 2 1
0 2 1

A B C D
1 1 N 0
2 3 N 1
1 2 1 1
0 2 1 1

Bが２または３、CがNaN出ない時にDを１にしたいのですがどうやったらいいですか？
###考えたコード

```
s["D"] = s.apply( lambda x: 1 if (x["B"] == 2 or x["B"] == 3or x["C"] != NaN))
```

これだとシンタックスエラーになってしまうのです

何卒、よろしくお願いします

pandas  カラム複数からの条件分岐

クラスに関して勉強しはじめたのですが、とくに使いどころというかメリットがみつかりません

たとえばこんなの
```lang-＜ここに言語を入力＞
class sample:
	def __init__(self, s_1, s_2, s_3):
		self.s_1 = s_1
		self.s_2 = s_2
		self.s_3 = s_3

	def keisan(self):
		return self.s_1 * self.s_2 * self.s_3


ans = sample(2, 3, 4)
print(ans.keisan())
```
なんとなく頭にあること
1. 初期化メソッドのinitの引数にselfを指定して、上記のs_1, s_2のように書き、self.s_1 = s_1みたいにselfを使いアトリビュートに何かを指定することで、別の関数で使うときに使いまわし？ができる。

2.別の関数で初期化メソッドのアトリビュートを使うときはkeisan(self):みたいに引数にselfを指定しないと初期化メソッドのアトリビュートにアクセスできない。

3.つまりselfが肝である。

みたいなことでしょうか。そんな感じで全く分かってないまである。
あと、selfはオブジェクト自身を指す。とか書いてあったんですがオブジェクトなんでサンプルソースの中にいくらでもあんだろ。目みえてんのかお前
と言いたくなるくらいにselfが何なのか分かっていません。つまりselfは何なんでしょうか？
コーヒーも飲めない僕には理解できない概念なんでしょうか
教えてください。

クラスって存在する意味あるんですか？

### 以下のようなテーブルを年度をカラムにした形で整形したい

### 解決策

```python
import pandas as pd

df = pd.DataFrame({'YMD':[2012,2012,2013,2014,2014],
              'ITEM_CD':['0001','0002','0003','0001','0003'],
          'SALES':[100,200,300,200,400]})

# MultiIndex の解除
df2 = df.reset_index(drop=False)

# NaN を 0 で置換
df2.pivot(index='ITEM_CD', columns='YMD', values='SALES').fillna(0)
```

##### (現状)
- `YMD` と `ITEM_CD` で MultiIndex を設定している状態

|         |             | SALES |
| :---:   | :---:       | :---: |
| **YMD** | **ITEM_CD** |       |
| 2012    | 0001        | 100   |
|         | 0002        | 200   |
| 2013    | 0003        | 300   |
| 2014    | 0001        | 200   |
|         | 0003        | 400   |


##### (理想)
- `ITEM_CD` を Index に設定

|             | 2012  | 2013  | 2014  |
| :---:       | :---: | :---: | :---: |
| **ITEM_CD** |       |       |       |
| 0001        | 100   | 0     | 400   |
| 0002        | 200   | 0     | 0     |
| 0003        | 0     | 300   | 400   |l

MultiIndex から Index と 行 に分ける方法について (行列置換)

raspberry Pi を使って人感センサーに反応したらiPhoneにお知らせする物を作りたいと思い、調べたところ下記のサイトを発見しました。 
https://www.sho-yamane.me/entry/2015/06/07/195407 
こちらを参考にgmailのアドレス、パスワードを変更して実行してみたのですが、

```python
line 52
 return msg
 SyntaxError: 'return' outside function
```

とエラーが表示されます。

```python
#!/usr/bin/env python
# -*- coding: utf-8 -*-
from __future__ import print_function
import os.path
import datetime
import smtplib
import socket
import time
import RPi.GPIO as GPIO
GPIO.setmode(GPIO.BCM)
GPIO.setup(25, GPIO.IN)
from contextlib import closing
from email import Encoders
from email.Utils import formatdate
from email.MIMEBase import MIMEBase
from email.MIMEMultipart import MIMEMultipart
from email.MIMEText import MIMEText

#Gmailアカウント
ADDRESS = "アドレス"
PASSWARD = "パスワード"

#SMTPサーバの設定(Gmail用)
SMTP = "smtp.gmail.com"
PORT = 587
def create_message(from_addr, to_addr, subject, body, mime=None, attach_file=None):
    """
    メッセージを作成する
    @:param from_addr 差出人
    @:param to_addr 宛先
    @:param subject 件名
    @:param body 本文
    @:param mime MIME
    @:param attach_file 添付ファイル
    @:return メッセージ
    """
    msg = MIMEMultipart()
    msg["From"] = from_addr
    msg["To"] = to_addr
    msg["Date"] = formatdate()
    msg["Subject"] = subject
    body = MIMEText(body)
    msg.attach(body)

# 添付ファイル
    if mime != None and attach_file != None:
        attachment = MIMEBase(mime['type'],mime['subtype'])
        file = open(attach_file['path'])
        attachment.set_payload(file.read())
        file.close()
        Encoders.encode_base64(attachment)
        msg.attach(attachment)
        attachment.add_header("Content-Disposition","attachment", filename=attach_file['name'])

    return msg


    if mime != None and attach_file != None:
        attachment = MIMEBase(mime['type'],mime['subtype'])
        file = open(attach_file['path'])
        attachment.set_payload(file.read())
        file.close()
        Encoders.encode_base64(attachment)
        msg.attach(attachment)
        attachment.add_header("Content-Disposition","attachment", filename=attach_file['name'])
    
    return msg

def send(from_addr, to_addrs, msg):
    """
    メールを送信する
    @:param from_addr 差出人
    @:param to_addr 宛先(list)
    @:param msg メッセージ
    """
    smtpobj = smtplib.SMTP(SMTP, PORT)
    smtpobj.ehlo()
    smtpobj.starttls()
    smtpobj.ehlo()
    smtpobj.login(ADDRESS, PASSWARD)
    smtpobj.sendmail(from_addr, to_addrs, msg.as_string())
    smtpobj.close()
    
if __name__ == '__main__':
#宛先アドレス
    to_addr = "アドレス"
#件名と本文
    subject = "侵入者あり！"
    body = "たった今侵入者がありました！警戒してください！"
#添付ファイル設定(text.txtファイルを添付)
    mime={'type':'text', 'subtype':'comma-separated-values'}
    attach_file={'name':'test.txt', 'path':'./text.txt'}
#メッセージの作成(添付ファイルあり)
#msg = create_message(ADDRESS, to_addr, subject, body, mime, attach_file)
#メッセージ作成(添付ファイルなし)
while True:
    inputValue = GPIO.input(25)
if (inputValue == True):
    msg = create_message(ADDRESS, to_addr, subject, body)
    send(ADDRESS, [to_addr], msg)
    time.sleep(1)
```

何が原因なのでしょうか？