Q&A
制御ファイルの設定内容を質問に追記して下さい。
SQL*Loaderを使用し、csvファイルの特定のデータを選択しテーブルに取り込みたいです。
CSVファイルの中身が以下の通りだとし、左から順番に
id,name,age,phoneNoというテーブル項目でidとnameがPKです。
【csv】
1,佐藤,35,000-0000-0000
2,鈴木,32,111-1111-1111
3,田中,28,222-2222-2222
3,田中,28,222-2222-2121
これをそのままSQL*Loaderで挿入しようとすると、3行目と4行目が一意制約に引っかかってしまい挿入できません。
結果として、
3,田中,28,222-2222-2121
のデータをテーブルに挿入し、上の、
3,田中,28,222-2222-2222
のデータは挿入されないようにしたいです。
どうすればそのデータのみが挿入されるようにできるでしょうか？
制御ファイルの内容は以下の通りです。
OPTIONS
(DIRECT=FALSE,ERRORS=-1)
LOAD DATA
INFILE 'C:\data.csv' BADFILE 'C:\data.bad'
APPEND
INTO TABLE EMP
FIELDS TERMINATED BY','
OPTIONALLY ENCLOSED BY'"'
TRAILING NULLCOLS
(
id CHAR,
name CHAR,
age DECIMAL EXTERNAL,
phoneNo CHAR
)
ちなみに、
APPENDではなくREPLACEでも行ってみましたが、
一つ目のデータが挿入され、PKがダブっている二つ目のデータはBADファイルに飛ばされてしまいました。
逆のことがやりたいことなのですが・・・。
回答1件
0
ベストアンサー
本来は一意制約がないデータをロードすべきです。
どうしてもということであれば、
一度一意制約を外し、ロードし、ダブったデータをUPDATE、一意制約を追加しては？
投稿2020/08/24 03:58
総合スコア16415
実際にはPKがダブったデータを含め数千件のデータがあるため、UPDATEするデータを1件1件探すよりも、ダブった後のデータだけを残すようにしたいです。ダブっているデータは後に来たものが正であることは確実です。
REPLACEなら置き換えなので、後のデータが使用されるはずので、CSVの順序を確認されてみて下さい。
PARALLEL=trueだと順番は保たれないと思いますが。
ありがとうございます。しかしREPLACEはPKが同じ行を置き換えるということではなく、あくまでもすべてのデータが同じものを入れる際元のデータを消して置き換えているようです。
ここで上げている例でいうと、
3行目の田中さんの行を消して３行目の田中さんのデータを入れる。
4行目の田中さんの行を消して４行目の田中さんのデータを入れる。
しかし4行目の田中さんのデータは3行目の田中さんのデータとPKがダブっているため一意制約に反してしまうのでBadファイルに送られる。
という形のようです。
TRUNCATEも同様でした。APPENDは、
3行目の田中さんのデータがあっても3行目の田中さんのデータを新しく入れようとするためこれは当たり前のようにPKがダブってしまいました。
SQL*Loader以外も使用しなくてはいけなそうな気もしています・・・。
Truncateは目的に合いませんか？
→ああ、試されていたのですね。
外部データの取込は、一旦ワークテーブルに取り込む方が、新たなパターンが発生した時など、色々と対応しやすいかと思います。
私は殆ど、全てが文字属性の一時テーブルに取り込んでから、正式なデータへの反映を行うようにしています。
別テーブルにロードして、元テーブルに同一キーがなければINSERT、同一キーがあって別テーブルの年齢や電話番号が元テーブルより小さかったらUPDATEしては？MERGEが使えるかはわからないけど。
あなたの回答
tips
プレビュー
