質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
Linux

Linuxは、Unixをベースにして開発されたオペレーティングシステムです。日本では「リナックス」と呼ばれています。 主にWebサーバやDNSサーバ、イントラネットなどのサーバ用OSとして利用されています。 上位500のスーパーコンピュータの90%以上はLinuxを使用しています。 携帯端末用のプラットフォームAndroidは、Linuxカーネル上に構築されています。

Ubuntu

Ubuntuは、Debian GNU/Linuxを基盤としたフリーのオペレーティングシステムです。

シェル

シェル(shell)はUnix や Linux 系のOSで使用されるコマンドインタプリタを指します。

文字コード

文字コードとは、文字や記号をコンピュータ上で使用するために用いられるバイト表現を指します。

Q&A

解決済

2回答

9189閲覧

文字変換で iconv: シグナル 7 によって終了しました と出たのですが、どなたか解決方法をご存知ですか?

dlrowolleh

総合スコア120

Linux

Linuxは、Unixをベースにして開発されたオペレーティングシステムです。日本では「リナックス」と呼ばれています。 主にWebサーバやDNSサーバ、イントラネットなどのサーバ用OSとして利用されています。 上位500のスーパーコンピュータの90%以上はLinuxを使用しています。 携帯端末用のプラットフォームAndroidは、Linuxカーネル上に構築されています。

Ubuntu

Ubuntuは、Debian GNU/Linuxを基盤としたフリーのオペレーティングシステムです。

シェル

シェル(shell)はUnix や Linux 系のOSで使用されるコマンドインタプリタを指します。

文字コード

文字コードとは、文字や記号をコンピュータ上で使用するために用いられるバイト表現を指します。

0グッド

0クリップ

投稿2017/01/24 07:50

編集2017/01/24 07:57

###やりたいこと→hageディレクトリ以下のhtmlファイルすべてのエンコードをEUC-JPからUTF-8にしたい

hageディレクトリ以下のhtmlファイルすべてのエンコードをEUC-JPからUTF-8にしたいと思い、
テキストファイルを一括でiconv - Qiita
を参考に

find hage -type f | xargs file | grep ":.*HTML" | cut -d: -f1 | xargs -t -I{} iconv -f EUC-JP -t UTF-8 {} -o {}

としたところ、

iconv -f EUC-JP -t UTF-8 hage/2016/2016_04_22/04_22本日のほげ君/あ.html -o hage/2016/2016_04_22/04_22本日のほげ君/あ.html

iconv -f EUC-JP -t UTF-8 hage/2016/2016_04_22/04_22本日のほげ君/い.html -o hage/2016/2016_04_22/04_22本日のほげ君/い.html
iconv -f EUC-JP -t UTF-8 hage/2016/2016_04_22/04_22本日のほげ君/い_files/DataListTitle.html -o hage/2016/2016_04_22/04_22本日のほげ君/い_files/DataListTitle.html
iconv -f EUC-JP -t UTF-8 hage/2016/2016_04_22/04_22本日のほげ君/い_files/DataListHyou.html -o hage/2016/2016_04_22/04_22本日のほげ君/い_files/DataListHyou.html
iconv: 位置 32551 に不正な入力シーケンスがあります
iconv -f EUC-JP -t UTF-8 hage/2016/2016_04_22/04_22本日のほげ君/あ_files/DataListTitle.html -o hage/2016/2016_04_22/04_22本日のほげ君/あ_files/DataListTitle.html
iconv -f EUC-JP -t UTF-8 hage/2016/2016_04_22/04_22本日のほげ君/あ_files/DataListHyou.html -o hage/2016/2016_04_22/04_22本日のほげ君/あ_files/DataListHyou.html
xargs: iconv: シグナル 7 によって終了しました
xargs: file: シグナル 13 によって終了しました

と表示されました。
変換したいHMTMLのソースはすべて

HITML

12 <meta http-equiv="Content-Type" content="text/html; charset=EUC-JP">

と書いてあるのでEUC−JPからUTF-8で良いと思います。

$ echo $LANG

ja_JP.UTF-8

と出ました。
また、(hage/2016/2016_04_22/04_22本日のほげ君/い.html -o hage/2016/2016_04_22/04_22本日のほげ君/い.html )の後のファイルのエンコーディングがEUC-JP→UTF8に変換されていませんでした。

どのようにすればhageディレクトリ以下のhtmlファイルすべてのエンコードをEUC-JPからUTF-8にできますか。

ご存知のかたがいらっしゃいましたら教えていただけないでしょうか?

###補足情報(言語/FW/ツール等のバージョンなど)
環境はubuntu15.10
bash
です。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

ikedas

2017/01/24 08:15

iconvの正確なバージョンを記していただけますか。
dlrowolleh

2017/01/24 08:27

$ iconv --version iconv (Ubuntu GLIBC 2.21-0ubuntu4.3) 2.21 Copyright (C) 2015 Free Software Foundation, Inc. This is free software; see the source for copying conditions. There is NO warranty; not even for MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. 作者 Ulrich Drepper。でした。nkfではうまくいったのになぜiconvでは途中で変換が止まってしまったのでしょうか…。
ikedas

2017/01/24 08:41

また、hage/2016/2016_04_22/04_22本日のほげ君/あ_files/DataListHyou.html のファイルサイズを教えて下さい。また他のファイルはこのファイルより小さいですか、大きいですか。
dlrowolleh

2017/01/24 09:20

hage/2016/2016_04_22/04_22本日のほげ君/あ_files/DataListHyou.htmlは32KBでした、その他変換できなかったhtmlファイルはだいたい180KB〜185KBありました。ファイルの容量が大きいと処理ができないということですか?シグナル 7 で検索すると、メモリ関連がヒットしたので、ファイルが大きすぎて処理できなかった(フリーズ?)ということですか…?
guest

回答2

0

ベストアンサー

シグナル 7 (バスエラー) で異常終了したのは、iconvのなんらかのバグによるものと考えてよいと思います。ウェブ検索してみると、libiconvを使用するソフトウェアで似たような報告がいくつか見つかりますが、再現条件がはっきりしない (コンパイルし直すと直ったりする) ため、原因を特定できないままのようです。

-oオプションでファイルを上書きしているとファイルサイズが32kiBを超えたあたりで現象が起きるという報告を見かけました (とあるブログの記事)。確証はありませんが、これが異常終了のトリガなのだとすると、上書きをしないようにすることで回避できるかもしれません。具体的には、次のようにすればいいと思います。

  • iconvによる変換結果を、元のファイルとは別の一時ファイルにいったん保存する。
  • 一時ファイルの内容で元のファイルを置き換える。

投稿2017/01/24 10:03

ikedas

総合スコア4227

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

dlrowolleh

2017/01/24 10:36

ご親切に解説していただきありがとうございます。 手作業でやっていたら日が暮れるので楽チンな方法は〜がきっかけで バスエラーなんて聞いたこともないことが起こるなんて…。(初耳でした…。) 大変勉強になりました。 これを機にLinux内部でどんなことがおこっているのか(xargs を使ったら高速になる理由やシグナル、プロセス?等)について勉強してみたいと思います!
ikedas

2017/01/24 12:48

すっきりしない回答になってしまいました。 iconvを最新のバージョンにアップデートすれば直ったりするかも知れませんが、ubuntuなどではlibiconvがglibcに組み込まれてしまっているので、少々難しいですね。今後glibcをアップデートしたときにでも、直っているか確認してみるとよいかもしれません。
dlrowolleh

2017/01/24 13:50

ありがとうございます。 >すっきりしない回答になってしまいました。 とんでもないです。 私自身Linuxを触り始めてまだ日が浅く、勉強不足なところが多くあります。 Linuxを使いこなせるよういろいろと勉強にさせていただきます!
guest

0

申し訳ありません。
解決いたしました。
まさおのブログ (表): ファイルの文字コードを一括変換 (find, nkf, xargs)
を参考にさせていただきました。
find . -type f -exec nkf -w --overwrite {} ;

お騒がせしてしまい。大変失礼いたしました

投稿2017/01/24 08:05

dlrowolleh

総合スコア120

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問