python初心者です。csvファイルの情報をメディアンフィルタを使って処理したいです

Question

現在はjupiterでpythonを利用しています。
c言語は少し扱ったことがあるのですが、pythonは初めてです。

csvファイルにあるデータをメディアンフィルタを用いて
中央値を求めたいです。

「csvファイルの読み込み」まではできるのですが
その先がわかりません。

よろしくお願いいたします。

Answer 1

k-basketman様

大切な質問に便乗する厚顔無恥をお許し下さい。

cesolution様に質問があります。
私は同じような処理を昇順ソートで解決しました。

そして数日前からnumpyの勉強を始めたところです。

k-basketman様のエラーメッセージを見て、処理要素数が
奇数個と分かる箇所があるのでしょうか？

numpy初学者の私なら、「データの真ん中の値」に対して、
処理要素数は偶数個ですか奇数個ですか？
と折り返し質問してしまいます。

エラーメッセージのどこを見れば対象要素数を判定できのかを教えて
くだされば幸いです。

---

自宅に戻りましたので、自分で検証しました。
検証環境：Anaconda3

valueA,valueB,valueC
1,2,3

valueA,valueB,valueC,valueD
1,2,3,4

Anacondaの出力するメッセージからは、 median() を使って
データ要素数が偶数個であるか奇数個であるかを判定できない。
となりました。

k-basketman様の質問とcesolution様の回答を見なければ
疑問に思うこともなく過ごしているところでした。

よい勉強になりました。ありがとうございました。

Answer 2

k-basketman様

大切な質問に便乗する厚顔無恥をお許し下さい。

cesolution様に質問があります。
私は同じような処理を昇順ソートで解決しました。

そして数日前からnumpyの勉強を始めたところです。

k-basketman様のエラーメッセージを見て、処理要素数が
奇数個と分かる箇所があるのでしょうか？

numpy初学者の私なら、「データの真ん中の値」に対して、
処理要素数は偶数個ですか奇数個ですか？
と折り返し質問してしまいます。

エラーメッセージのどこを見れば対象要素数を判定できのかを教えて
くだされば幸いです。

Answer 3

numpyの中にmedianの関数があるので、以下のように、csv読み込み後のデータを直接関数に投げてやれば求められるかと思います。

import numpy as np
a = np.loadtxt("sampledata.csv",delimiter=",")
print(np.median(a))

Comments

[k-basketman]

回答ありがとうございます。

---------------------------------------------------------------------------
ValueError Traceback (most recent call last)
<ipython-input-34-bf09a134bf8c> in <module>()
1 import numpy as np
----> 2 a = np.loadtxt("sc.csv",delimiter=",")
3 print(np.median(a))

c:\program files\python35-32\lib\site-packages\numpy\lib\npyio.py in loadtxt(fname, dtype, comments, delimiter, converters, skiprows, usecols, unpack, ndmin)
928
929 # Convert each value according to its column and store
--> 930 items = [conv(val) for (conv, val) in zip(converters, vals)]
931 # Then pack it according to the dtype's nesting
932 items = pack_items(items, packing)

c:\program files\python35-32\lib\site-packages\numpy\lib\npyio.py in <listcomp>(.0)
928
929 # Convert each value according to its column and store
--> 930 items = [conv(val) for (conv, val) in zip(converters, vals)]
931 # Then pack it according to the dtype's nesting
932 items = pack_items(items, packing)

c:\program files\python35-32\lib\site-packages\numpy\lib\npyio.py in floatconv(x)
657 if b'0x' in x:
658 return float.fromhex(asstr(x))
--> 659 return float(x)
660
661 typ = dtype.type

ValueError: could not convert string to float: b'time'

このようなエラーが表示されるのですが
データ（列）を特定させるべきなのでしょうか？
よろしくお願いいたします。

[cesolution]

csvファイルの中に文字列が入っているようですので、文字列の行（先頭行でしょうか）を削除して試してみていただけますか。複数列あっても特に問題はないはずです。

[k-basketman]

ありがとうございます。
エラーなくコンパイルできました！

あと、教えていただけると助かるのですが、
実行された値（中央値）とデータの真ん中の値が異なるのは
どうしてなのでしょうか？

よろしくお願いいたします。

[cesolution]

k-basketman様
無事コンパイルできたということ安心いたしました。
「データの真ん中の値」というのは、CSVファイルに入っているデータを全て昇順に並べた場合の真ん中の値ということでしょうか？