int16 と int32 の中間について

Question

numpyで1~150000程度の整数値を処理しており、メモリの節約を試みています。

int16やuint16では32767,65535までと微妙に足りず、
かといってint32は4294967925までと必要な範囲を大幅に超過しているという状況です。

メモリ節約の目的で、int16とint32の中間の変数型を使用する、ということは可能でしょうか？

よろしくお願いいたします。

追記：最大値は150000です。

Comments

[maisumakun]

＞ メモリの節約を試みています。

それは、どの程度必要なことなのでしょうか？（計算速度が遅くなるなどの代償を伴ってもいいものなのでしょうか？）

[sakaibe]

800万のデータを用いてColabでXGBoostを行っているのですが、メモリ不足の影響でその中から10万件のみをランダムサンプリングして学習に用いざるを得ないという状況です。
学習に使うサンプル数は多い方が良く学習できると思っていますので、多少遅くなったとしてもサンプル数を増やしたいと考えています。

Answer 1

こちらが参考になるかと。
メモリエラーの回避方法

Answer 2

• メモリ節約の目的で、int16とint32の中間の変数型を使用する、ということは可能でしょうか？

numpyの型ではできません。

何か別の方法を考えられる可能性もありますが、最大値が分からなければそれもできません。