バイナリデータを指定して読み込みたい

Question

前提・実現したいこと

　pythonを用いて、符号なし整数のバイナリデータを読み込みたいのですが、データが大きすぎるので範囲を指定して読みたい。
30億までは大丈夫でしたので、30億から60億までを指定して読み込みたいです。

発生している問題・エラーメッセージ

data = np.fromfile(f, np.uint8,6000000000)
MemoryError

該当のソースコード

#!/usr/bin/env python2
# -*- coding: utf-8 -*-
import struct

f = open("○○○.dat", "rb")
data = np.fromfile(f, np.uint8,6000000000)

試したこと

struct.unpackなども試してみましたがうまく行きません。プログラミングを習い始めて間もないのですが、どうかよろしくおねがいします。

Answer 1

読込ファイルはバイナリなので、開始位置までシークした後読み込めばよいです。
参考：How to read part of binary file with numpy?

N = 3000000000
f = open("○○○.dat", "rb")
f.seek(8*N) # uint8のサイズ=8[byte]×30億番目までシーク
data = np.fromfile(f, np.uint8, N) # 30億番目から30億個

Comments

[konomamadehai]

ありがとうございます。自分が動かしたいように動かすことができました。シークさせればよかったんですね。