文字型から数値型に変換する時にA value is trying to be set on a copy of a slice from a DataFrameが発生します。

Question

前提・実現したいこと

こんにちは

世田谷区の保育園データを加工して計算しようとしています。
計算した結果の列はできるのですがワーニングがでています。
ワーニングの消し方を教えてください。

下記の回答をみたのですがうまく対応できませんでした。

A value is trying to be set on a copy of a slice from a DataFrame
を解消して、データを文字列から数字に変換したい
https://teratail.com/questions/230241

エラーメッセージ

/var/folders/hq/wygr2ggd77n_fwljr_58fymm0000gp/T/ipykernel_53867/821116963.py:1: SettingWithCopyWarning:
A value is trying to be set on a copy of a slice from a DataFrame.
Try using .loc[row_indexer,col_indexer] = value instead

See the caveats in the documentation: https://pandas.pydata.org/pandas-docs/stable/user_guide/indexing.html#returning-a-view-versus-a-copy
youga['４歳'] = youga['４歳'].astype(int)

該当のソースコード

youga

地域 ４歳 ５歳
用賀 615 613
用賀 638 603
用賀 647 642
用賀 339 306
用賀 290 337

youga.columns
Index(['地域・地区', '４歳', '５歳'], dtype='object')

youga['４歳'] = youga['４歳'].astype(int)

python 3.8.11

Answer 1

行を抽出した結果だったりすると提示の警告が発生します。
エラー文にも記載されているように.locを使うと回避できますが
抽出条件など不明なこともあるので、比較的お手軽な解決策としてははcopyをとってそれに対して操作することです。

import pandas as pd

df = pd.DataFrame({'n':[1,2,3,4], 's':list('1234')})
df2 = df[df['n'] <= 2]

# SettingWithCopyWarning
#df2['s'] = df2['s'].astype(int)

# No Waring
df2 = df2.copy()
df2['s'] = df2['s'].astype(int)

print(df2)

Comments

[shimamura999]

can110様　ありがとうございます。　無事解決できました。

Answer 2

can110様,ppaul様　ありがとうございます。
無事解決できました。

COPYを知らなかったの助かりました。
https://techacademy.jp/magazine/18988 Pythonでcopyを使う方法【初心者向け】
TechAcademyマガジン

ある書籍では
warnings.simplefilter('ignore')
を書きましょうと書いてありましたがキチンと警告は対応したほうがいいですね。

Answer 3

こちらでは Pandas 1.3.5 を使用していますが、warning は表示されません。

Pandas のソースコードに以下のコメントが記載されています。

pandas/generic.py at master · pandas-dev/pandas · GitHub

This technically need not raise SettingWithCopy if both are view

(which is not # generally guaranteed but is usually True. However,

this is in general not a good practice and we recommend using .loc.

df.iloc[0:5]['group'] = 'a'

なので、以下の様にすると良いかもしれません。

youga.iloc[:]['４歳'] = youga['４歳'].astype(int)

追記

エラー、ワーニングは発生しませんでしたが変換はされませんでした

Pandas 1.3.5 では int へ変換されます。

>>> print(youga.dtypes)
地域・地区    object
４歳          object
５歳          object
dtype: object

>>> youga.loc[:,'４歳'] = youga['４歳'].astype(int)
>>> print(youga.dtypes)
地域・地区    object
４歳           int64
５歳          object
dtype: object

Comments

[shimamura999]

melian様　ありがとうございます。
試してみたのですが変換されずobject型のままでした。
後でもう一度試してみます。

[melian]

ごめんなさい、以下を試してみて貰えますか？
youga.loc[:,'４歳'] = youga['４歳'].astype(int)

[shimamura999]

コメントありがとうございます。
エラー、ワーニングは発生しませんでしたが変換はされませんでした。
melian様COPYで対応ができたのでもう大丈夫です。

[melian]

はい、了解です。ただ、Pandas 1.3.5 ではこれで int に変換されます。

[shimamura999]

コメントありがとうございます。
int に変換されました。

環境がpandas 1.3.3でしたので1.3.4にアップデートしました。
Anacondaの環境で作業をしているので
Pandas はcondaでインストールしました。
condaでは1.3.5はまだリリースされていないかもしれませんね。

1.3.4ではint型に変換されますがワーニングがでるようになりました。
A value is trying to be set on a copy of a slice from a DataFrame.
Try using .loc[row_indexer,col_indexer] = value instead

Answer 4

yougaの作り方に問題があります。
とりあえず、以下に変更すればよいでしょう。

youga = youga.copy()
youga['４歳'] = youga['４歳'].astype(int)

Comments

[shimamura999]

ppaul様　ありがとうございます。　無事解決できました。