PGadmin4 機種依存文字の表示

Question

PgAdmin4で機種依存文字が表示できません。

■環境
・PostgreSQL バージョン12
・PgAdmin バージョン4.2.4
・データベースの文字コード EUC-JP

■質問
上記環境で、⓵⓶⓷、ⅠⅡⅢ、㈱などの機種依存文字を扱いたいです。
外部アプリからの登録や取得は問題なく出来るのですが
PgAdmin4のクエリエディタで表示をしようとすると下記のようなエラーになります。
PgAdmin3の時は問題なく使えたのですが...。
ご助言をお願いいたします。

'euc_jp' codec can't decode byte 0xad in position 8: illegal multibyte sequence

Answer 1

⓵⓶⓷は①②③の間違いですかね?

機種依存文字は本来のJIS文字集合に含まれませんので、正しく規格通りのEUC-JPとして解釈すればエラーとなって不思議はありません。
PostgreSQLについてはあまり詳しくないのですが、確か3と4は全くの別ソフトですよね。
1から作り直す際にそのへんの細かい部分で意図せず何か変わってしまったのではないかと想像します。
Windowsで使われる機種依存文字を含むEUC-JPは「CP51932」という名です…が、どうも「eucJP-ms」という似た別物もあるようで複雑です。
https://ml.postgresql.jp/pipermail/pgsql-jp/2008-March/014443.html

・eucJP-ms（PostgreSQLが扱う日本語EUC-JP）

・CP51932（WindowsのIEなどが扱う日本語EUC-JP）

UTF-8を使えるならそちらの方がよいと思います。
文字コードに関していえば、EUC-JPの(JIS文字集合の)外字領域はすべてUnicodeに対応付けられます。
軽く検索してみたところ、どうやらデフォルトで外字領域を変換することは出来ないものの、文字エンコーディングの変換は自作できるようです。
参考: PostgreSQLを拡張してみよう p20

Comments

[uroncha]

>デフォルトで外字領域を変換することは出来ないものの、文字エンコーディングの変換は自作できるようです。

文字エンコーディングを追加する方法で出来そうな気がしてきました。
しかし色々調べたのですがよくわかりませんでした。
Create Conversion でコンバート用の関数名称を定義
Create Function で変換テーブル用の関数（内容）を定義

という事だと理解しました。
書き方のサンプルのようなものがあると良いのですが...。

[ikadzuchi]

私も詳しくないので検索して見つけた上記の内容しか分かりませんね…。

Answer 2

エラーの通りです。

'euc_jp' codec can't decode byte 0xad in position 8: illegal multibyte sequence

'euc_jp'コーデックは8桁目のバイト0xadをデコードできません：不正なマルチバイトシーケンス

utf8（できればutf8mb4）にしてください。

Comments

[uroncha]

EUC-JPを選択している理由は外字です。
UTF8で外字は利用できるのでしょうか？

UTF8にしたら外部アプリから外字を使った文字列の登録できなくなりました。

PostgreSQL12のエラー
符号化方式"SJIS"においてバイト列0xf0 0x40である文字は符号化方式"UTF8"で等価な文字を持ちません
符号化方式"SJIS"においてバイト列0xf0 0x81である文字は符号化方式"UTF8"で等価な文字を持ちません

[m.ts10806]

文字コードの変更は場合により元のデータが影響するので変更というか、作りなおしのほうが良いですね。