質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.49%

  • Python 3.x

    6843questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

  • String

    92questions

    Stringは、ゼロ以上の文字から連続してできた文字の集合を扱うデータ型です。基本的にテキストを表すために使われます。

Python 3.5でのバックスラッシュを含む文字列置換について

解決済

回答 1

投稿 編集

  • 評価
  • クリップ 0
  • VIEW 3,089

shutosg

score 15

 やりたいこと

文字列strが与えられていて、strから文字列の置換を用いてstr2のような文字列を生成したいのですが、どうやっても出来ませんでした。どうすれば実現できるでしょうか?

str = '\\x80\\x00\\x00\\x00\\x00\\x00\\xb0'
str2 = '\x80\x00\x00\x00\x00\x00\xb0'

以下、奮闘の結果を記しますが、結構長いので最後まで読んで頂かなくても構いません。。。

 試したこと1

  • '\\x'を'\x'で置き換える
str.replace('\\x', '\x')
# SyntaxError: (unicode error) 'unicodeescape' codec can't decode bytes in position 0-1: truncated \xXX escape


ググってもエラーの意味がよく分からなかった(position 0-1とはどこのこと?)のですが、文字列'\x'で置き換えようとして、「そもそも文字列とは'\xXX'の形式ですよ。'\x'は文字列じゃないですよ」って怒られてると解釈しています。

'\\x'->'\x'の置換で怒られるなら、'\\xXX'->'\xXX'の置換をしよう。

str.replace('\\x00', '\x00')
# '\\x80\x00\x00\x00\x00\x00\\xb0'

一応できたっぽい。でも、str2のようにするには

str.replace('\\x00', '\x00').replace('\\x80', '\x80').replace('\\xb0', '\xb0')


のように全パターン手動で置き換えないといけません。不格好だし、数が増えた時にツライので却下。

 試したこと2

  • strを文字列として扱ってるから'\\x'->'\x'の置換が出来ない。じゃあバイト列として扱おう。
byte = str.encode()
# b'\\x80\\x00\\x00\\x00\\x00\\x00\\xb0'

byte.replace(b'\\x', b'\x')
# SyntaxError: (value error) invalid \x escape at position 0


またなんかエラー出てきた…
調べたのですが、\xというのはそれ単体で、後ろの2文字を16進数として扱うためのエスケープ記号を表しているっぽい??

 試したこと3

  • \\\に置き換える
  • 文字列(str)じゃなくてバイト列を使う
  • そもそも\ってエスケープ記号によく使われるので、これ単体での置換は面倒臭い事になりそうな気がしていて避けていましたが、今までがことごとくダメだったので試してみることに…
byte.replace(b'\\', b'\')
# SyntaxError: EOL while scanning string literal


これもエラー文でググったのですが、最後のb'\'の部分が\のせいで'(シングルクォーテーション)が閉じ記号として扱われていないそうで、エラー吐かれます。

では、シングルクォーテーションをエスケープしてみます。こうすればバイト列中の\\\に置き換わってくれるはず。

byte.replace(b'\\\\', b'\\')
# b'\\x80\\x00\\x00\\x00\\x00\\x00\\xb0


予想に反して全く置換がされません。

更に色々試していて、こんなことも起きました…

str.encode().replace(b'\\', b'')
# b'x80x00x00x00x00x00xb0'


byte.replace(b'\\', b'\')をした時は、第2引数のb'\'\'のエスケープに使われて怒られたのに、今度はb'\\'\はエスケープに使われていない…

この辺りで完全にお手上げ状態ですが、一応reモジュールを読み込んで正規表現も色々試しましたが、結局うまく行きませんでした。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 1

checkベストアンサー

+1

根本的な勘違いをされているようです。
strを作った時点でもうstr2と同じ文字列ができてますよ。
もしエスケープが嫌ならr''を使うことができます。

>>> s = '\\x80\\x00\\x00\\x00\\x00\\x00\\xb0'
>>> print(s)
\x80\x00\x00\x00\x00\x00\xb0
>>> s = r'\x80\x00\x00\x00\x00\x00\xb0'
>>> print(s)
\x80\x00\x00\x00\x00\x00\xb0
>>>

-- 追記1
最初からあるので変数名strは避けましょう。

-- 追記2: あ、質問の意味が分かりました...
んーちょっとキレイで簡単な方法は思いつきませんねぇ。
evalに嫌悪感なければこういうのとか。

>>> s = '\\x80\\x00\\x00\\x00\\x00\\x00\\xb0'
>>> eval('"{}"'.format(s))
'\x80\x00\x00\x00\x00\x00°'
>>>

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2016/05/02 08:35 編集

    ご回答ありがとうございます。
    >strを作った時点でもうstr2と同じ文字列ができてますよ。
    とおっしゃいますが、str2は最後の`\xb0`以外は文字列としては有効でないので、

    ```Python
    >>> print(str2)
    €°
    ```
    となります。私が欲しいのはこの有効ではない文字を含むstr2なのです。


    >追記1
    確かにクラス名にstrというのがありました。ご指摘ありがとうございます

    キャンセル

  • 2016/05/02 08:51

    作りたいのは文字列じゃなくてバイト列だった、という可能性はありますか?

    キャンセル

  • 2016/05/02 08:57

    > この有効ではない文字を含むstr2なのです。

    表示できないだけで、str2はすべてを含んでいますよ。

    >>> print(s)
    °
    >>> print(repr(s))
    '\x80\x00\x00\x00\x00\x00°'
    >>> len(s)
    7
    >>>

    キャンセル

  • 2016/05/02 09:09

    >作りたいのは文字列じゃなくてバイト列だった、という可能性はありますか?
    その通りで、欲しかったのはバイト列でした。正確でない表現をしてしまって申し訳ありませんでした。

    evalを使った方法も、いくつか調べながら試してみてできなかったのですが、、、まさにこれでした…!!ありがとうございます!!!

    キャンセル

  • 2016/05/02 09:22

    バイト列を得る場合は eval('b"{}"'.format(s)) でいけそうですね。

    ただ、一般的にはevalは要注意人物みたいな関数ですので、用途によっては使うことができません。「eval 危険」みたいなキーワードでググっていただけるといろいろ出るかと思います(検索に出てくるのはJavaScriptのevalが多いでしょうけど、避けるべき理由はどの言語でも似ています)。

    ので、比べるとちょっと複雑になってしまいますが、こっちの方がよいかもしれません。
    >>> s = '\\x80\\x00\\x00\\x00\\x00\\x00\\xb0'
    >>> bytes(int(x, base=16) for x in s.split('\\x') if x)
    b'\x80\x00\x00\x00\x00\x00\xb0'
    >>>

    キャンセル

  • 2016/05/02 09:36

    書き忘れてましたのでここで。

    奮闘した理由ですが、おそらくエスケープ処理が常にされると考えていたからだと思います。エスケープ処理はPythonが文字列リテラルを読み込む(解析する)ときに行われます。一度メモリに乗ったPython上の文字列オブジェクトにはエスケープ処理はされません。これがreplaceで解決できない理由です。

    キャンセル

  • 2016/05/02 11:16

    JavascriptやPHPのevalも存在も知っていたのでその危険性はある程度理解しているつもりですが、解決した後もわざわざご指摘いただきありがとうございます。

    また、奮闘した理由についても考察頂きありがとうございます!
    Pythonにおいてエスケープ処理が行われるタイミングというのを全く考慮していませんでした。(というか知らなかったのですが)
    今後はその辺りも想定しながら学んでいこうと思います!

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.49%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

同じタグがついた質問を見る

  • Python 3.x

    6843questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

  • String

    92questions

    Stringは、ゼロ以上の文字から連続してできた文字の集合を扱うデータ型です。基本的にテキストを表すために使われます。