質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
Linux

Linuxは、Unixをベースにして開発されたオペレーティングシステムです。日本では「リナックス」と呼ばれています。 主にWebサーバやDNSサーバ、イントラネットなどのサーバ用OSとして利用されています。 上位500のスーパーコンピュータの90%以上はLinuxを使用しています。 携帯端末用のプラットフォームAndroidは、Linuxカーネル上に構築されています。

Q&A

解決済

2回答

1162閲覧

linux上でバイナリファイルを特定の文字列で分割したい

inashichi

総合スコア39

Linux

Linuxは、Unixをベースにして開発されたオペレーティングシステムです。日本では「リナックス」と呼ばれています。 主にWebサーバやDNSサーバ、イントラネットなどのサーバ用OSとして利用されています。 上位500のスーパーコンピュータの90%以上はLinuxを使用しています。 携帯端末用のプラットフォームAndroidは、Linuxカーネル上に構築されています。

0グッド

3クリップ

投稿2018/08/22 08:42

編集2018/08/23 05:37

バイナリファイルがlinux上に配置されている配置されています。
そのファイルはデータの末尾がx31x32x33x34(数字の1234)で固定されており、それ以降はx00で埋められています。
x00で埋められた部分は不要なので、x31x32x33x34まででファイル内容を区切りたいと考えております。
x31x32x33x34を区切り文字列としてcutコマンドを打てば実現できると考えたのですが、うまくいきませんでした。
ファイルサイズは確かに減っているのですが、x00埋めの部分が残ったままとなりました。
以下が試したコマンドとなります。

cut file_before --output-delimiter=7777 -f 1 > file_after
cut file_before --output-delimiter=31323334 -f 1 > file_after
※追記 「--output-delimiter」を「区切り文字列を指定する」と誤解していたため、そもそも見当違いのコマンドになっていました。

バイナリデータのため、区切り文字列を正確に判断できていないと思われるのですが、改善方法について教えていただけませんでしょうか。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

otn

2018/08/22 12:20

テキストファイルの場合でも、--output-delimiter は全く無関係なオプションです
inashichi

2018/08/23 00:07

ご指摘ありがとうございます。区切り文字「列」の指定になると勘違いしていました…。
guest

回答2

0

ベストアンサー

cutやsedあたりは行指向のコマンドなので、バイナリファイルには適しません。

ワンライナーでPerlを使ってよければ、こんな感じかと。

$ perl -0777 -pe 's/(1234)\x00*\z/$1/' file_before > file_after

投稿2018/08/22 11:01

emasaka

総合スコア524

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

inashichi

2018/08/23 04:22

ご回答ありがとうございます。 上記コマンドでやりたいことができました。 perlについて「プログラミング言語の1つ」程度の知識しかなかったので調べながらの構文の解釈となりましたが、下記の通りに理解しました。 -0777 →ファイル内容全体を1レコード(1行)とする -pe →1行毎にループして次に続くコマンドを実行する(今回は1行なのでループなし) 's/(1234)\x00*\z/$1/' →「1234」の後に「x00」が0回以上連続する文字列の末尾(実質ファイル末尾)を、「1234」に置換 file_before > file_after →入力ファイル > 出力ファイル
emasaka

2018/08/23 04:49

はい。上の理解でだいたい合ってると思います。
guest

0

perlワンライナーでやっちゃいましょう。
$ perl -p -e 's/1234.*$/1234/g' file_before > file_after

文字列'1234'とその後続データ全てを'1234'で置換しています。
本来は行ごとに処理されますが、今回の件では'1234'の後続に改行コードとみなされる文字は入らないので、特に意識しなくても大丈夫です。

※物理メモリ実装量を超える巨大なファイルで実行するとハングアップするかもしれません。そこだけ気を付けてください。


本回答は末尾以外に'1234'が出現する可能性を考慮していませんでした。
emasakaさんの回答のほうがより良いです。
本回答を修正するとこうなります。
$ perl -p -e 's/1234\x{00}*$/1234/g' file_before > file_after

投稿2018/08/22 10:58

編集2018/08/22 11:27
hope_mucci

総合スコア4447

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

inashichi

2018/08/23 04:30 編集

ご回答ありがとうございます。 こちらのコマンドでもやりたいことができました。 調べながら解釈し、次のようにコマンドを理解しました。 -p -e →1行毎にループして次に続くコマンドを実行する(バイナリなので改行がないため、ループしない) 's/1234\x{00}*$/1234/g' →「1234」の後に「x00」が0回以上連続する行の末尾(実質ファイル末尾)を全て、「1234」に置換 file_before > file_after →入力ファイル > 出力ファイル
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問