GBDTの予測結果のndarrayでTypeError: integer argument expected, got float

Question

GBDTで予測した結果をprint()等すると、
TypeError: integer argument expected, got float
となります。

model = XGBRegressor(objective="reg:squarederror", max_depth=10, min_child_weight=4)
model.fit(train_x, train_y)

preds = model.predict(test_x)
print(preds)

※　エラーメッセージ追記
Traceback (most recent call last):
  File "C:/Users/jimog/OneDrive/Desktop/Programing/Coin_Trade/DeepLearning/Training/Training_DBGT_Main.py", line 71, in <module>
    print(preds)
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 1490, in _array_str_implementation
    return array2string(a, max_line_width, precision, suppress_small, ' ', "")
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 692, in array2string
    return _array2string(a, options, separator, prefix)
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 468, in wrapper
    return f(self, *args, **kwargs)
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 494, in _array2string
    format_function = _get_format_function(data, **options)
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 427, in _get_format_function
    return formatdict['float']()
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 367, in <lambda>
    data, precision, floatmode, suppress, sign, legacy=legacy),
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 861, in __init__
    self.fillFormat(data)
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 891, in fillFormat
    frac_strs, _, exp_strs = zip(*(s.partition('e') for s in strs))
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 891, in <genexpr>
    frac_strs, _, exp_strs = zip(*(s.partition('e') for s in strs))
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 890, in <genexpr>
    for x in finite_vals)
TypeError: integer argument expected, got float

結果のデータは以下のように、マイナスありの小数です。

pprint(list(preds))

結果：
[2400.1956,
 2252.0037,
 -766.37213,
 -885.14404,
 -336.5241,
～～～略～～～

---------------------------------------------
for p in preds:
    print(p,type(p))
    
結果：
2400.1956 <class 'numpy.float32'>
2252.0037 <class 'numpy.float32'>
-766.37213 <class 'numpy.float32'>
-885.14404 <class 'numpy.float32'>
～～～略～～～

特徴量と教師ラベルのデータは、NANと空文字等なしで、全て明示的にfloat64へ変換しています。

試したこと
・上記のように、for文で回すとエラー無し（全て型はnumpy.float32でした）
・print(list(preds))でリストに変換すると表示できます。
・print(np.array(preds))で再度ndarray変換は同エラーでできませんでした。
・print(preds.dtype)はfloat32が表示されます。
・print(preds.astype(np.float))で型変換は、同エラーでした。(float32,float64でも同じくエラー)
・print(np.array(list(preds)))でも同エラーでした。
・以下のように、一度変数に代入しても、エラーになるのはprint()の行でした。

a=preds.astype(np.float)
print(a)

環境は、
Window10
Python 3.7.9
numpy 1.19.2
xgboost　0.90
（anacondaの仮想環境）
pycharm
です。

エラー文としては、整数の引数に小数を入れたのでエラーです、というような内容なので、どこかで型を指定すればよいのかと思うのですが、型変換も受け付けてもらえず、どう対処したらよいかわからないです。

ご存知の方おられましたら教えて頂きたく思います。
よろしくお願い致します。

追記：
toast-uz様からの質問での実行結果

for i in range(2, len(preds)):
print(preds[:i])

結果
Traceback (most recent call last):
  File "C:/Users/jimog/OneDrive/Desktop/Programing/Coin_Trade/DeepLearning/Training/Training_DBGT_Main.py", line 82, in <module>
    print(preds[:i])
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 1490, in _array_str_implementation
    return array2string(a, max_line_width, precision, suppress_small, ' ', "")
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 692, in array2string
    return _array2string(a, options, separator, prefix)
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 468, in wrapper
    return f(self, *args, **kwargs)
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 494, in _array2string
    format_function = _get_format_function(data, **options)
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 427, in _get_format_function
    return formatdict['float']()
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 367, in <lambda>
    data, precision, floatmode, suppress, sign, legacy=legacy),
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 861, in __init__
    self.fillFormat(data)
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 918, in fillFormat
    int_part, frac_part = zip(*(s.split('.') for s in strs))
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 918, in <genexpr>
    int_part, frac_part = zip(*(s.split('.') for s in strs))
  File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 917, in <genexpr>
    for x in finite_vals)
TypeError: integer argument expected, got float

Comments

[toast-uz]

コードもエラーメッセージも解釈を記載して一部を切り出すのではなく、できるだけ全てをそのまま掲載いただき、解釈はコードの外に記載するか、コメント形式で記載するようにお願いします。エラーメッセージも複数行出る全体を掲載ください。

[666_paru]

すみません、エラーメッセージ全文を記載するようにします。

追記させて頂きます。

[jbpb0]

エラーは
https://teratail.com/questions/224947
と、かなり似てますね (残念ながら解決はしてません)
そちらは、XGBRegressor()ではなくLinearRegression()で起きてるので、学習アルゴ固有の話ではないような

どちらの質問も、入力データが提示されてないので、他人には現象が再現できないのですよね

[jbpb0]

下記のようにデータを適当に作ってやってみましたが、エラーになりませんでした

import numpy as np
from xgboost import *
train_x = np.arange(-50, 51).T.astype(np.float64)
train_y = train_x * 2
train_x = train_x[:, np.newaxis]
test_x = np.arange(-5, 6).T.astype(np.float64)
test_x = test_x[:, np.newaxis]
model = XGBRegressor(objective="reg:squarederror", max_depth=10, min_child_weight=4)
model.fit(train_x, train_y)
preds = model.predict(test_x)
print(preds)

環境
Windows 10
Python 3.7.9
numpy 1.19.2
xgboost 1.2.1

[toast-uz]

〜〜略〜〜 に何かある可能性がありますので、切り分けのために、
print(preds[:2])
print(preds[:3])
・・
と順に試して、どこでエラーが発生するのかを確認できますでしょうか？
for i in range(2, len(preds)):
print(preds[:i])
で、順に全て試せます。

[666_paru]

jbpb0様
検証頂きありがとうございます。

自分の環境について調べてみたとこと、xgboostは 1.2.1ではなく、0.90でした。
conda update py-xgboostを行いましたが、print(xgboost.__version__)で0.90のままでして、アップデート方法確認中になります。

データについてですが、どうお渡しすればよいかわからないのですが、全量ないと完全に再現できるかわからないと思いました。
しかし、BitFlyerApiからのデータ取得に2晩くらいかかっておりまして、
また、1か月前までのデータしか取得できないため、同じデータはとれないようでした。

[666_paru]

toast-uz様
for i in range(2, len(preds)):
print(preds[:i])
を試したところ、print()の行でTypeError: integer argument expected, got floatのエラーになりました。
エラーコード全文は以下になります。
Traceback (most recent call last):
File "C:/Users/jimog/OneDrive/Desktop/Programing/Coin_Trade/DeepLearning/Training/Training_DBGT_Main.py", line 82, in <module>
print(preds[:i])
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 1490, in _array_str_implementation
return array2string(a, max_line_width, precision, suppress_small, ' ', "")
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 692, in array2string
return _array2string(a, options, separator, prefix)
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 468, in wrapper
return f(self, *args, **kwargs)
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 494, in _array2string
format_function = _get_format_function(data, **options)
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 427, in _get_format_function
return formatdict['float']()
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 367, in <lambda>
data, precision, floatmode, suppress, sign, legacy=legacy),
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 861, in __init__
self.fillFormat(data)
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 918, in fillFormat
int_part, frac_part = zip(*(s.split('.') for s in strs))
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 918, in <genexpr>
int_part, frac_part = zip(*(s.split('.') for s in strs))
File "C:\Users\jimog\anaconda3\envs\Bit_Trade\lib\site-packages\numpy\core\arrayprint.py", line 917, in <genexpr>
for x in finite_vals)
TypeError: integer argument expected, got float

[toast-uz]

ありがとうございます。この欄はインデントが書けませんので表現できませんが、for文の後のprint文にはインデントを入れてください。なお、どのiまで動いたのかわかるように、iも一緒にprintするようにお願いします。
for i in range(2, len(preds)):
インデントprint(i)
インデントprint(preds[:i])
結果ご報告の際は、エラーメッセージ直前の表示も入れるようにお願いします。最低でも2が表示されるはずです。なお、今回の結果は中途半端なので、次の結果記載する際は、今回記載いただいた「追記」を上書きしてしまったほうがよいです。

[jbpb0]

> conda update py-xgboostを行いましたが、print(xgboost.__version__)で0.90のままでして、アップデート方法確認中になります。

このエラーはデータに依存して発生しているような気がするので、バージョンは関係無いような
(根拠なく思ってるだけですが)

ちなみに、私はpipで入れてます
https://xgboost.readthedocs.io/en/latest/build.html
に、condaでの入れ方が書かれてないからです
もちろん、アップデートもpipでやってます
(condaで入れたものはアップデートもconda、pipで入れたものはアップデートもpipでやってます)
公式のインストールの案内に書かれてる方法の方が、なんとなく安心するので

[bsdfan]

numpy.get_printoptions() で返ってくる値がおかしく(intであるべき値がfloatに)なってないでしょうか。

[666_paru]

解決に向けご協力頂いている皆さま、大変申し訳ございません。
先ほど、細かく確認していったところ、使っているデータでも同じエラーが出ることがわかりました。
遡っていくと、df['price'].resample(term).ohlc()等のリサンプルの集計メソッドで発生しておりました。

以前、集計前の元データの期間を短くしてテストした際には問題なかったため、修正したGBDT周辺に原因があると判断したのが良くありませんでした 。
申し訳ございません。

原因はわかっておりませんが、最初の質問内容から大幅に変わりますので、調べて解決しない場合は改めて質問させて頂こうと思っております。

ご協力頂き大変ありがとうございました。

[666_paru]

重ね重ね申し訳ございません。
bsdfan様のお話から
np.set_printoptions(precision=5, suppress=True)
と、指数表記しないよう設定してみたところ、エラーが出なくなりました。

[toast-uz]

解決してよかったです。自己解決の回答を投稿して、クローズをお願いします。

Answer 1

np.set_printoptions(precision=5, suppress=True)
と、指数表記しないよう設定してみたところ、エラーが出なくなりました。

皆さまありがとうございました。