文字コード変換

Question

hoge.txtの文字コードがASCIIになっています．
そのためか，ファイルを開くと
b'\xe3\x82\xa8\xe3\x82\xad\xe3\x82\xb5\xe3\x82\xa4\xe3\x83\x88'
b'\xe3\x83\x9b\xe3\x83\xbc\xe3\x83\xa0'
このようにコードで表示されるので困っています，
これをUTF-8等に変換しようと思い，nkfコマンドを実行したのですがうまくいきません．

S:>nkf -g hogee.txt
ASCII

S:>nkf -w --overwrite hogee.txt

S:>nkf -g hogee.txt
ASCII

どうしたらよいでしょう．
環境はwindows8.1です．

Answer 1

Pythonをお使いなのですね！？

b'\xe3\x82\xa8\xe3\x82\xad\xe3\x82\xb5\xe3\x82\xa4\xe3\x83\x88'
b'\xe3\x83\x9b\xe3\x83\xbc\xe3\x83\xa0' 

というのは、PythonのByte列が変換されないままファイル出力されてしまったものなので…Pythonを使えば簡単に元に戻せますよ。

たとえば、decode.py などの名前で下記コードを記載し、

# -*- coding: utf-8 -*-

import codecs

fin  = open('test.txt', 'r')
fout = open('mod_test.txt', 'w')

for line in fin:
        str = eval( line.decode('utf-8') )
        fout.write(str + '\n')

fin.close()
fout.close()

以下のように実行すればUTF-8に変換できますよ。

C:¥…> type test.txt
b'\xe3\x82\xa8\xe3\x82\xad\xe3\x82\xb5\xe3\x82\xa4\xe3\x83\x88'
b'\xe3\x83\x9b\xe3\x83\xbc\xe3\x83\xa0'


C:¥…>
C:¥…> python decode.py

C:¥…>
C:¥…> nkf32 -u mod_test.txt
エキサイト
ホーム

C:¥…>

ちなみに、蛇足ながらPythonで文字列を扱う際には、下記ページをご参考になさると良いと思います。

Python3で文字列を処理する際の心掛け

Answer 2

ファイルの内容が、文字通り、
b'\xe3\x82\xa8\xe3\x82\xad\xe3\x82\xb5\xe3\x82\xa4\xe3\x83\x88'
b'\xe3\x83\x9b\xe3\x83\xbc\xe3\x83\xa0'
のようになっているのではないでしょうか。これは英数字記号の羅列なので文字コード変換してどうのこうのというレベルの問題では無いです。

何らかのプログラムで\xe3などを該当するバイトに置換する必要があります。
nkfが入っているようですが、他にどんなツールが使えますか？

Comments

[退会済みユーザー]

ご回答ありがとうございます。
正直、ほとんど何も知らない状態で…

他のツールと言いますとどのようなものを指すのでしょうか？

[otn]

> 他のツールと言いますとどのようなものを指すのでしょうか？
プログラムが書けて実行できるような環境です。

> 正直、ほとんど何も知らない状態で…
であれば、自分でどうにかするのをあきらめて、ファイルの作成者に「読めない」旨を伝えて対処してもらうのがいいと思います。

[退会済みユーザー]

プログラムにはPython3系を使用しています。
ファイルは自分でいじっている最中にこのようになってしまいました。
元々、utf-8だったのですが、何故か一部utf-8で読み込むことが出来ず試行錯誤していたところです。

[otn]

自分で書いたプログラムの出力と言うことであれば、プログラムを正しく修正するのがいいと思います。
新規に質問を立てて、
「こういうプログラムを書いた。結果はこうなることを期待したが、こうなってしまった。プログラムのどこが悪いのか？」と聞いて下さい。

質問文の「ファイルを開くと」というのも具体的にどんなツール(メモ帳？、〇〇というエディタ？)での事なのかちゃんと書いてください。