テキストデータをバイナリデータに変換 C言語

Question

テキストデータをバイナリデータに変換するプログラムを作成しているのですが
うまくいきません

テキストデータをfopenの"r"モードで読み込み
その後
fopenの"wb"モードで作成したファイルに書き込む

このような手法をとっているのですがアドバイス頂きたいです

Comments

[otn]

具体的にどういうデータをどういうデータに変換したいのですか？

[ccccididid]

float型で50×50に並んでるものをバイナリデータに変換したいです

[otn]

いや、だから、具体的に。

[ccccididid]

テキストデータはfloat型で50×50(2500個)のデータがあります(このテキストデータはセルシウス度表記の温度データです) このテキストデータを画像処理ソフトで解析するために同じ並びで格納されているバイナリデータが必要なために変換する必要があります

[Zuishin]

テキストデータに float 型というのはありません。

[ccccididid]

すみません 小数点以下6桁の値です

[otn]

話が通じないので、別の聞き方をします。その画像処理ソフトの入力データについて書かれている記述をそのまま質問に追記してください。

[退会済みユーザー]

その値がテキスト上どう並んでいるのかが見えないから、具体的にと言われているんだと思います。テキストデータ上どう並んでいるかの仕様、もしくは記載例がほしいです。

[ccccididid]

5.666824 1.585226 ・・・・・ 左のような形で50行50列で並んでいます 画像処理ソフトの入力データについて書かれている記述の見方がわからないため間違えているかもしれませんが tiffやjpeg,拡張子のついていないデータなどを読み込んでくれます

[Zuishin]

それをそのまま保存しても画像にはなりませんよ。記述の見方がわかるようになるのが先では？

[asm]

50*50の小数が並んでるテキストから50*50のグレイスケール画像を作りたいという事？

[fana]

その"画像処理ソフト"とやらが入力として扱える形式に「画素値として浮動小数点数を取れる何らかのフォーマット」が存在するのか否か？→(1)存在するならば，そのフォーマットに関する具体情報が必要，(2)存在しないならば，扱える形式にデータを変換する必要があるがその際の「妥当な変換って何？」というのは，行われる「解析」の都合次第なので，そこを具体的に説明する必要がある．

Answer 1

以下の手順でテキストファイルをバイナリ形式で保存できます。

手順 (Python)

1. numpy.loadtxt() でテキストファイルを読み込み。
2. ndarray.tofile() でバイナリ形式で保存する。(row-major-order)

サンプルコード

50行50列の数値データが書き込まれた CSV ファイルを読み込み、バイナリ形式で保存します。(row-major-order)

import numpy as np

# テスト用データ作成 (50行50列でスペース区切り)
data = np.random.randn(50, 50)
np.savetxt('data.csv', array, delimiter=' ')

# ファイルを読み込む。
data = np.loadtxt('data.csv')
print(data.shape, data.dtype)  # (50, 50) float64

# バイナリ形式で保存 row-major-order で書き込まれます。
data.tofile('data.binary')

# バイナリ形式で保存できたか、確認する。
with open('data.binary', 'rb') as f:
    d = f.read()
    print('bytes of data.binary', len(d))  # bytes of data.binary 20000
    # Python の float 型は 8bytes  (倍精度) なので、4 * 50 * 50 = 20000

C++

すいません。タイトルを見てませんでした。
「画像処理ソフトの入力データを作る」が目的であれば、言語はなんでもよいと思いますが、C++ のサンプルコードも貼っておきますね。
(C言語は面倒なので、省略します。すいません。)

#include <fstream>
#include <iostream>
#include <sstream>
#include <string>
#include <vector>

/**
 * @brief 指定したパスからデータを読み込む。
 * @param filepath ファイルパス
 * @param data 読み込んだデータ
 */
void readTxtData(
    const std::string &filepath, std::vector<std::vector<double>> &data)
{
    data.clear();
    std::ifstream ifs(filepath);

    std::string line;
    while (std::getline(ifs, line)) {
        if (line.empty())
            continue;
        std::vector<double> rowData;
        std::stringstream lineStream(line);

        double value;
        while (lineStream >> value) {
            rowData.push_back(value);
        }

        data.push_back(rowData);
    }
}

/**
 * @brief 指定したパスにデータを書き込む。
 * @param filepath ファイルパス
 * @param data 読み込んだデータ
 */
void writeData(
    const std::string &filepath, const std::vector<std::vector<double>> &data)
{
    std::ofstream ofs(filepath, std::ios::out | std::ios::binary);
    for (const auto &rowData : data) {
        for (const auto &v : rowData)
            ofs.write(reinterpret_cast<const char *>(&v), sizeof(v));
    }
}

int main()
{
    // データを読み込む。
    std::vector<std::vector<double>> data;
    readTxtData("data.csv", data);

    // データを表示する。
    for (const auto &rowData : data) {
        for (const auto &v : rowData)
            std::cout << v << " ";
        std::cout << std::endl;
    }

    writeData("data.binary", data);
}

Answer 2

その「画像処理ソフト」がどんな形式のデータを受け入れるのか詳細な仕様を貼ってもらわなければ誰も答えられません。
浮動小数点数のバイナリ形式だけでも色々な種類があります。

Comments

[pepperleaf]

多分、double か、float そのままで良いのでは?
ちょっと簡単に作ってみようと思ったが、時間が無い...

Answer 3

... テキストデータをバイナリデータに変換 ...

テキストデータもバイナリーデータです。
rb モードで書き込んでも本質的にはなにも変わりません。

参考情報

• バイナリファイルの読み書き

https://9cguide.appspot.com/17-02.html

...
全てのファイルは本質的にはバイナリファイルです。
バイナリを直訳すると、2進数という意味なのですが、
バイナリファイルとはその名の通り、2進数で記録されたファイル、
要するに、数値のみで記録されたファイルのことを意味します。

それに対して、テキストファイルは、文字列だけが記録されたファイルです。
コンピュータの中では、文字列といえども数値で表されているので、
テキストファイルも、本質的にはバイナリファイルです。
...

• バイナリファイルの読み書き

https://programming-place.net/ProgrammingPlacePlus/c/042.html

...
テキストファイルをテキストエディタで確認できるように、バイナリファイルは、バイナリエディタを使って確認できます。
...

どんな入力ファイルに対して、どんな出力ファイルを得たいのかの具体例を提示してみてください。
そうすれば、いろいろ回答が投稿されると思います。

Answer 4

もしかして以下のような事でしょうか?

  // 以下、イメージです。不足(手抜き)箇所多数
  FILE *textFile = fopen("TextFile", "r");
  FILE *binFile = fopen("BinaryFile", "wb");

  double data;
  while (fscanf(textFile, "%f", &data) > 0) {
    fwrite(&data, sizeof(double), 1, binFile);
  }

テキストファイルから、読み込んで、バイナリファイルへの書込みとなります。