質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.61%

  • PostgreSQL

    1033questions

    PostgreSQLはオープンソースのオブジェクトリレーショナルデータベース管理システムです。 Oracle Databaseで使われるPL/SQLを参考に実装されたビルトイン言語で、Windows、 Mac、Linux、UNIX、MSなどいくつものプラットフォームに対応しています。

PostgreSQLのCOPY文での数値項目への空文字インポートについて

解決済

回答 1

投稿

  • 評価
  • クリップ 1
  • VIEW 7,533

Satoshi_Okada

score 13

PostgreSQLデータベースで、
CSVファイルからcopy from文を使ってデータをインポートしようとしております。

・CSVファイル
囲み文字:"(全文字囲われています)
区切り文字:,

・COPY句

COPY {テーブル} FROM '{CSVファイル}' WITH ( FORMAT CSV ,NULL '');

上記のCSVファイルを取り込む際に、numericの項目で下記のエラーが発生しております。

ERROR:  invalid input syntax for type numeric: ""
CONTEXT:  COPY {テーブル名}, line 1, column {数値項目}: ""

numeric属性に対して、文字項目を挿入しようとしてエラーになっているようなのですが、理由がわかりません。

Copy句で「NULL ''」を指定しているので、それによりCSV上の空文字も「NULL」になると期待していたのですが……。

対象の項目は数値項目ですが、空文字が存在しており、空文字と0とは明確に切り分ける必要があります。(データ例:"1234","0","")
上記のような項目を取り込むことはできないのでしょうか?

上記のような現象に何か心当たりなどあるかたがおられましたら、  
ご教授いただきたく思います。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

回答 1

checkベストアンサー

0

csv postgreql numeric null
で google 検索すると次のようなページが見つかりました。

...
インポートのバリエーションとして、NULL で取り込まれている空文字も空文字で取り込みたい場合、 force_not_null オプションを利用する。
...

...
空文字をNULLとして扱うという指定(WITH NULL AS '')をすれば、回避できます。
   COPY [テーブル名] FROM [ファイルの絶対パス] WITH NULL AS '';
...

こうして得た情報をもとに、いろいろ試してみたり、さらの別の単語で検索をすると解決できると思います。

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2016/03/31 16:28

    回答ありがとうございます。

    コメント頂いた情報を元にさらに調べてみたのですが、
    どうにもうまく行かず、別の方法で対応することとしました。

    心残りはありますが、一旦解決とさせていただきます。
    ありがとうございました。

    キャンセル

  • 2016/03/31 16:32

    > ... 別の方法で対応することとしました。...
    他の方の参考となるように、さしさわりがなければ その方法を記載するとよいと思います。

    キャンセル

  • 2016/04/04 10:33

    >他の方の参考となるように、さしさわりがなければ その方法を記載するとよいと思います。

    コメントありがとうございます。
    もともと、この処理はワークテーブルにデータを取込、その後、PLSQLで本テーブルにデータを取り込むことを想定しておりました。

    今回、数値として取り込むことが難しかったため、ワークテーブルを全て文字型に変更、
    PLSQL側で考慮することとしました。

    ですので、同じ問題に対する参考になるかはわかりませんが……。
    ファイルで来る以上、一度は文字項目として受け取ったほうがいいかもしれませんね、という結論でした。

    粗末な結論で申し訳ないのですが、こんな感じです。

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.61%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

  • 解決済

    posgresql \copyのfromに変数(csvのパス)を使いたい

    AWSのRDSでpostgresqlを使用しております。 定期的なデータ更新があり、シェルスクリプトとSQLで更新環境を作成しております。 ローカル(vagrantで作成したc

  • 解決済

    postgresのデータ取得時間を短縮したい

    タイトルの通りpostgresからデータを取得する時間を短縮したいです。 以前にも質問させていただいたのですが、前回とは少し内容が変わっております。 テーブルには2700万

  • 解決済

    同じカラムのテーブルを探す。

    データベースについて質問です。 複数のテーブルの中で同じ名前のカラムがあるか調べるには どうしたらいいでしょうか? postgreSQL

  • 解決済

    postgreSQLにて インサートで2つのテーブルに対してインサート

    postgreSQLにて インサートをしたいテーブルが2つある場合 一度に2つインサートすることは可能でしょうか? 可能ならやり方を教えていただきたいです。 abcテー

  • 解決済

    sql select文での''の使用について

    postgresqlにて select '' as 宣言した名前,'' as 宣言した名前(2) form テーブル名 のような select部分でカラム名を宣言すると

  • 解決済

    PostgreSQLに複数のCSVをインポート

    前提・実現したいこと 毎日他のシステムで作成される日本語ヘッダ付きCSVをDBサーバーに置き 夜間バッチでディレクトリ内のCSV全てインポートしたいです。 ご教示くださいますよ

  • 解決済

    複数のCSVを同時にSQLへ読み込む

    前提・実現したいこと 複数のCSVをpostgreSQLで次の順で読み込みたいと考えております ①各CSVをcopy文で読み込む ②読み込んだものを統合する なお、先にCSVを

  • 解決済

    時間フォーマットの数値変換について

    いつもお世話になっております。 早速ですが、現在postgresqlにてデータの編集を行っております。 そこで、一部テーブルに格納されているデータについて 以下のとおり変換

同じタグがついた質問を見る

  • PostgreSQL

    1033questions

    PostgreSQLはオープンソースのオブジェクトリレーショナルデータベース管理システムです。 Oracle Databaseで使われるPL/SQLを参考に実装されたビルトイン言語で、Windows、 Mac、Linux、UNIX、MSなどいくつものプラットフォームに対応しています。