NaNを0に置換したいです。

Question

前提・実現したいこと

ここに質問の内容を詳しく書いてください。

表にあるNaNを0に変えたいと考えています。

該当のソースコード

import time#時間のモジュール
from selenium import webdriver #ブラウザの自動操作
import pandas as pd #データ分析
import numpy as np #多次元配列の高速計算
from matplotlib import pyplot as plt #グラフの描写
%matplotlib inline 
from tqdm import tqdm#for文の時間管理
from selenium.webdriver.chrome.options import Options

# --headlessだけではOSによって動かない、プロキシが弾かれる、
# CUI用の省略されたHTMLが帰ってくるなどの障害が出ます。
# 長いですが、これら6行あって最強かつどんな環境でも動きますので、必ず抜かさないようにしてください。
op = Options()
op.add_argument("--disable-gpu"); #計算方法の指定
op.add_argument("--disable-extensions"); #すべての拡張機能を無効にします
op.add_argument("--proxy-server='direct://'"); #
op.add_argument("--proxy-bypass-list=*"); #
op.add_argument("--start-maximized"); #画面サイズを最大化してブラウザを起動
op.add_argument("--headless"); #ヘッドレスChromeとして起動

#driver = webdriver.Chrome()
driver = webdriver.Chrome(chrome_options=op)#driverの指定
time.sleep(2) #休憩

columnNames=[]
ETFComparisonsTable=[]
for number in tqdm(range(0,3)):
    driver.get("https://kabuoji3.com/stock/") #とってくるurlの指定
    stockSearch=driver.find_element_by_class_name("form_inputs") #find_element_by_class_nameの引数にクラス属性名を指定すると要素を取得出来る
    stockSearchForm=stockSearch.find_element_by_class_name("form_txt") #上と一緒
    stockSearchForm.send_keys("ETF") #要素に対して特殊キーを入力することができます
    btnClick=driver.find_element_by_class_name("btn_submit") #上と一緒
    btnClick.click() #btnClickをクリック

    
      #choose a stock out of list
    stockClick=driver.find_elements_by_class_name("clickable")#上と一緒
    stockClick[number].find_element_by_tag_name("a").click()#for文のnumberを取得してaをクリック

    stockTable=driver.find_element_by_class_name("table_wrap")#上と一緒
    stockLine=stockTable.find_elements_by_tag_name("tr") #find_element_by_tag_nameの引数にタグ属性名を指定すると要素を取得出来る
    
      #price scraping with calculation
    if len(stockLine)==302: #リストの要素を数えて302の場合
        ETFComparisons=[]
        for kabuka in range(2,152):#2から152
            stockETFPriceAfter=stockLine[kabuka-1].find_elements_by_tag_name("td")#一日後のtd
            stockETFPriceBefore=stockLine[kabuka].find_elements_by_tag_name("td")#一日前のtd
            ETFComparison=float(stockETFPriceAfter[6].text)-float(stockETFPriceBefore[6].text)#終値調整の値の前後を計算
            ETFComparisons.append(ETFComparison)#ETFComparisonsにETFComparisonを追加

        stockETFPriceAfter=stockLine[151].find_elements_by_tag_name("td")#一日前のtd
        stockETFPriceBefore=stockLine[153].find_elements_by_tag_name("td")#一日後のtd
        ETFComparison=float(stockETFPriceAfter[6].text)-float(stockETFPriceBefore[6].text)#終値調整の値の前後を計算
        ETFComparisons.append(ETFComparison)#ETFComparisonsにETFComparisonを追加

        for kabuka in range(154,302):
            stockETFPriceAfter=stockLine[kabuka-1].find_elements_by_tag_name("td")#一日前のtd
            stockETFPriceBefore=stockLine[kabuka].find_elements_by_tag_name("td")#一日後のtd
            ETFComparison=float(stockETFPriceAfter[6].text)-float(stockETFPriceBefore[6].text)#終値調整の値の前後を計算
            ETFComparisons.append(ETFComparison)#ETFComparisonsにETFComparisonを追加

        ETFComparisonsTable.append(ETFComparisons)#まとめ

        #pick up title　タイトルの取得
        stockTitleBox=driver.find_element_by_class_name("base_box_ttl")
        stockTitle=stockTitleBox.find_element_by_class_name("jp").text
        columnNames.append(stockTitle)

#making ETF table ETFの表作り
ETFTable=pd.DataFrame(ETFComparisonsTable)
ETFTable=ETFTable.T
ETFTable.columns=columnNames

#checking ETF table確認
ETFTable.tail()

#date scraping 
driver.get("https://kabuoji3.com/stock/{}/".format(4307))#4307のページのurlを検索
stockTable=driver.find_element_by_class_name("table_wrap")#find_element_by_class_nameの引数にクラス属性名を指定すると要素を取得出来る
stockLine=stockTable.find_elements_by_tag_name("tr")#find_element_by_tag_nameの引数にタグ属性名を指定すると要素を取得出来る

dates=[]
for kabuka in range(1,152):#1から152
    stockDate=stockLine[kabuka].find_elements_by_tag_name("td")#find_element_by_tag_nameの引数にタグ属性名を指定すると要素を取得出来る
    stockDate=stockDate[0].text#textの取得
    dates.append(stockDate)#datesにstockDateを追加
    
for kabuka in range(153,302):#153から302
    stockDate=stockLine[kabuka].find_elements_by_tag_name("td")#find_element_by_tag_nameの引数にタグ属性名を指定すると要素を取得出来る
    stockDate=stockDate[0].text#textの取得
    dates.append(stockDate)#datesにstockDateを追加
    
df_date=pd.DataFrame()#変数の宣言
#日付をまとめている
df_date["date"]=dates#dateのリストを変数にして受け取ってる
df_date["year"]=df_date["date"].apply(lambda x:int(x.split("-")[0]))
df_date["month"]=df_date["date"].apply(lambda x:int(x.split("-")[1]))
df_date["day"]=df_date["date"].apply(lambda x:int(x.split("-")[2]))

df_date.tail()#確認

#stock scraping (comparison with yesterday)
driver.get("https://kabuoji3.com/stock/{}/".format(4307))#4307のページのurlを検索
stockTable=driver.find_element_by_class_name("table_wrap")#find_element_by_class_nameの引数にクラス属性名を指定すると要素を取得出来る
stockLine=stockTable.find_elements_by_tag_name("tr")#find_element_by_tag_nameの引数にタグ属性名を指定すると要素を取得出来る

targetStockComparisons=[]
for kabuka in range(2,152):#2から152
    targetStockPriceAfter=stockLine[kabuka-1].find_elements_by_tag_name("td")#一日後のtd
    targetStockPriceBefore=stockLine[kabuka].find_elements_by_tag_name("td")#一日前のtd
    targetStockComparison=float(targetStockPriceAfter[6].text)-float(targetStockPriceBefore[6].text)#終値調整の値の前後を計算
    targetStockComparisons.append(targetStockComparison)#targetStockComparisonsにtargetStockComparisonを追加
    
targetStockPriceAfter=stockLine[151].find_elements_by_tag_name("td")#一日後のtd
targetStockPriceBefore=stockLine[153].find_elements_by_tag_name("td")#一日前のtd
targetStockComparison=float(targetStockPriceAfter[6].text)-float(targetStockPriceBefore[6].text)#終値調整の値の前後を計算
targetStockComparisons.append(targetStockComparison)#targetStockComparisonsにtargetStockComparisonを追加

for kabuka in range(154,302):#154から302
    targetStockPriceAfter=stockLine[kabuka-1].find_elements_by_tag_name("td")#一日後のtd
    targetStockPriceBefore=stockLine[kabuka].find_elements_by_tag_name("td")#一日前のtd
    targetStockComparison=float(targetStockPriceAfter[6].text)-float(targetStockPriceBefore[6].text)#終値調整の値の前後を計算
    targetStockComparisons.append(targetStockComparison)#targetStockComparisonsにtargetStockComparisonを追加
    
    #題名の指定
df=pd.DataFrame(targetStockComparisons)
df.columns=["(株)野村総合研究所：前日比"]
df.head()

#add table　表の合体
stockPriceTable=pd.concat([df_date,ETFTable],axis=1)
stockPriceTable=pd.concat([stockPriceTable,df],axis=1)
stockPriceTable.head()

#prepare for making target values 名前作り
df_next=df.copy()
df_next.columns=["(株)野村総合研究所：翌日比"]

#date scraping for target values
driver.get("https://kabuoji3.com/stock/{}/".format(4307))#4307のページのurlを検索
stockTable=driver.find_element_by_class_name("table_wrap")#find_element_by_class_nameの引数にクラス属性名を指定すると要素を取得出来る
stockLine=stockTable.find_elements_by_tag_name("tr")#find_element_by_tag_nameの引数にタグ属性名を指定すると要素を取得出来る

dates=[]
for kabuka in range(2,152):#2から152
    stockDate=stockLine[kabuka].find_elements_by_tag_name("td")#find_element_by_tag_nameの引数にタグ属性名を指定すると要素を取得出来る
    stockDate=stockDate[0].text#題名をテキスト形式で取得
    dates.append(stockDate)#datesにstockDate
    
for kabuka in range(153,302):#153から302
    stockDate=stockLine[kabuka].find_elements_by_tag_name("td")#find_element_by_tag_nameの引数にタグ属性名を指定すると要素を取得出来る
    stockDate=stockDate[0].text#題名をテキスト形式で取得
    dates.append(stockDate)#datesにstockDate
    
   
#dateのリストのまとめ
df_date2=pd.DataFrame()
df_date2["date"]=dates

#making target values table　ターゲットの表を作る
df_next=pd.concat([df_date2,df_next],axis=1)
df_next.index=df_date2["date"]

#prepare for complete table　完全体の表の準備
table=stockPriceTable[0:299].copy()
table.index=table["date"]

#making complete table　完全体の表の作成
table["(株)野村総合研究所：翌日比"]=df_next["(株)野村総合研究所：翌日比"]

table.fillna(0)
table.head()

試したこと

最後の行のtable.headで表を出力したのですがNaNがでました。
それを消そうとfillnaを使ったのですがNaNが消えません。

補足情報（FW/ツールのバージョンなど）

非常に長く、質問下手で申し訳ありません
ここにより詳細な情報を記載してください。

Answer 1

fillnaメソッドはデフォルトでは新しいDataFrameを作成して返します。inplace引数をTrueに設定することでインプレースで処理を行えます。

table.fillna(0, inplace=True)

pandas.DataFrame.fillna — pandas 0.25.3 documentation

Comments

[kuro46]

回答ありがとうございます。
思った通りの操作ができました。