PostgreSQL/COPYコマンド

Question

前提・実現したいこと

PostgreSQL の COPY コマンドで、CSV の不要項目を取り除いて（無視？）は出来ないのでしょうか？
CSV の 項目で、2番目、４番目、５番目の項目は不要なので無視したいのですが・・・。
（イメージ的には）

COPY テーブル(ID,FILLER, CITY,FILLER,FILLER, ZIP_CODE) FROM XXXXX.csv

他で検索を行うも、CSV から不要項目を最初で取り除いて・・・とか
ダミーテーブルを作成して、CSV を取込、その後、必要な項目のみ INSERT するとかはあるのですが。

Answer 1

CSV の不要項目を取り除いて

出来ないですね。
どの道、いきなりテーブルに突っ込むのも怖いので、極力高速になるようにunloggedのテーブルを経由してやってます。

Comments

[boat_life2000]

unlogged で検討中に CREATE TEMP にたどり着きました
ヒントを有難う御座います。m(_ _)m

[sazi]

tempテーブルは on commit drop で削除する分残らないので良いのですが、unloggedにすることはできないので、大量データを扱うにはunloggedを付加できるtempではないテーブルのほうが向いていると思います。
マルチプロセスで行うなら、tempでしょうけど。

Answer 2

PostgreSQLの動作環境がないので試していませんが、使いたいカラムだけでVIEWを作ってVIEWからCOPYできないか試してみては？COPY — ファイルとテーブルの間でデータをコピーする

参考になるかも？VIEWに対するCOPY