正規表現の文字列置換についてアドバイス頂きたいです

Question

正規表現で特定の文字を含む行において特定の文字列を置換したいのですが、
うまく行かずアドバイスを頂きたいです。
正規表現はperl準拠です。

下記のような行があった場合に、
123を含む行のみダブルクオーテーションを除外するにはどのように正規表現を書くのが良いでしょうか。
否定の正規表現を使ってみたりと色々試しましたが、いい方法が浮かばず。。

123 "aaa"
456 "bbb"
789 "ccc"
123 "ddd"

↓

123 aaa
456 "bbb"
789 "ccc"
123 ddd
となるようにしたいです。

よろしくお願いいたします。

Answer 1

対象行の内容が$_に入っているとして、

/123/ and s/"//g;