環境
PHP Version 7.1.19
MariaDB 10.3.8-MariaDB

PHPでテキストからDBに挿入するプログラムを書いています。
Aテキストから約５００件ほどのデータを抽出、
DBにはAに該当するデータ行が約５００～１０００件

その中でテキストにだけ存在するデータをDBにinsertしたいと考えています。
また、その際は何がinsertされたのかを出力する必要があります。

例）
Aのテキストデータを配列にしたもの
Key | データ
aaa | bba
aab | bbb
aac | bbc

id | key | データ
A | aaa | bba
A | aab | bbb

上記の場合はaacが新規データとしてinsertし、
aac|bbc
を出力するイメージです。

この場合、パフォーマンス良く処理を行うにはどうするのが良いでしょうか？
今の所、手っ取り早くON DUPLICATE KEY UPDATEで実行した後、CREATEDでselectしてしまうのが良いのかとも思うのですが、
いまいちしっくり来ません（５００件のINSERT）これ以外に良い方法がありそうな気がしてます。

SELECT
*
FROM
(
VALUES
('a',1)　　　　← ここを配列の要素をまわして、作成
,('b',2)
) AS 配列

としてjoin

他に良い案があればお教え頂ければと思います。

退会済みユーザー

2018/07/23 22:28

今の状態はパフォーマンスの向上じゃなくパフォーマンスのいいものをください

m.ts10806

2018/07/23 22:29

「しっくり来ません」とのことですが、現在想定されている作りでのパフォーマンスはいかがでしょうか。具体的なコードの提示がありませんし、現在のパフォーマンスや度合いが分からないと「それより良い」というのは中々提示が難しいと思います。

行動規範の内容に同意します

回答1件

ベストアンサー

テンポラリテーブルに保持していくのが妥当かと

sample

基本データ

SQL
1create table tbl (`key` varchar(10) primary key,data varchar(10));
2insert into tbl values('aaa','bba'),('aab','bbb');

テンポラリを作ってデータをセットし何が新規データ確認しつつ基本データに新規データを投入

SQL
1create temporary table tmp(`key` varchar(10),data varchar(10),flg tinyint not null default 0);
2insert into tmp(`key`,data) values('aab','bbb'),('aac','bbc');
3update tmp left join tbl on tmp.key=tbl.key set tmp.flg=1 where tbl.key is null;
4insert into tbl select `key`,data from tmp where flg=1;
5select * from tmp where flg=1;
6