質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.47%

  • Python 3.x

    6907questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

DataFrameの欠損値補完について

解決済

回答 1

投稿

  • 評価
  • クリップ 1
  • VIEW 699

jun.k

score 20

前提・実現したいこと

DataFrameの欠損値を意図通りに補完したい

発生している問題・エラーメッセージ

csvに落とした時系列データを取り込んでデータフレーム化(df1)したあと、'Last'列に欠損値があるため、欠損があれば'AskBid_Price'列、なければそのままの値を表示するようにし、これを新たに追加する列'Price'に代入したいのですが、欠損があった場合にAskBid_Price列を採用することまでしか反映されず、欠損でない場合に'Last'列の値をそのまま表示することがなされません(null値になる)。

該当のソースコード

f=pd.read_csv('hourly_price_20070101-20170731.csv')
df=DataFrame(f)

df['AskBid_Price']=(df['Close Bid']+df['Close Ask'])/2

df1['Price']=np.where(df1['Last'].isnull,df1['AskBid_Price'],df1['Last'])

試したこと

whereの第1引数をdf1['Last'].notnullにして、第2引数と第3引数を入れ替えてみましたが、今度はnotnullだった場合(Last列の値を表示)しか反映されません

補足情報(言語/FW/ツール等のバージョンなど)

Pythonは3.5です。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 1

checkベストアンサー

0

df1['Price']=np.where(df1['Last'].isnull,df1['AskBid_Price'],df1['Last'])


の行は

df1['Price']=np.where(df1['Last'].isnull(),df1['AskBid_Price'],df1['Last'])


の間違いではないでしょうか。

あと、pandas.read_csv() は戻り値として pandas.DataFrame を返すので、

f=pd.read_csv('hourly_price_20070101-20170731.csv')
df=DataFrame(f)


の部分

df=pd.read_csv('hourly_price_20070101-20170731.csv')


で問題ないかと思います。

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2017/09/07 15:44

    ありがとうございます!。正しくできました。read_csvの行もご指摘ありがとうございます!!。

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.47%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

  • 受付中

    pythonのcsv.writerについて(機能)

    pythonのcsv.writerを使って以下のことをしたいのですが可能でしょうか? aというリストがありlen(a)=1であるとします。 bというリストがありlen(b)=1

  • 解決済

    Python:2つのデータフレームを比較し,時間が近いものを抜き出す

    前提・実現したいこと いつもお世話になっております。データフレームの取扱が分からず、質問させていただきます。 次の2つのCSVファイルがあるとします。 (本当はソースコー

  • 解決済

    1次元の集計結果をCSVに出力させたい

    前提・実現したいこと 1カラム内にある要素の個数を数え、その結果をCSVに出力させたいです。 例えば df内のカラムPが A B A B C だとすると、 A 2 B 2 C 1

  • 解決済

    python csvファイルに新しい行を追記するには

    csvファイルに追記をするために data=[B,10,0,10] with open('data.csv', 'a') as f: writer = csv.writer(f)

  • 受付中

    gzファイルの取り込み

    8M程度のcsvが圧縮されているgzファイルがあるのですが、これを読み込んでDataFrame化したいと考えています。 まずgzファイルをLhaplusで解凍する際に、ファイル

  • 受付中

    python ランキング 書き込み

    以前作っていただいたコードを書き直してランク付けした上で他のtxtファイルに移す作業のコードを教えていただきたいです。 https://teratail.com/ques

  • 解決済

    (Python)GroupByで指定した列を含んだDataFrameを作る方法

    Python初心者で、大変恐縮なのですが質問があります。 下記のようなデータを月別に集計してプロットしたいのですが、 date     sale  2018/01    1

  • 解決済

    Pythonでローソク足チャートを作りたい

    Pythonでローソク足チャートを作ろうと思いまして、色々調べているのですが、全てに共通するのがCSVファイルから読み込んだデータをグラフに描画するものでした。 しかし、私はC

同じタグがついた質問を見る

  • Python 3.x

    6907questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。