質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

91.36%

  • MySQL

    4382questions

    MySQL(マイエスキューエル)は、TCX DataKonsultAB社などが開発するRDBMS(リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

  • SQL

    1693questions

    SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

おかしなデータがDBに入っている場合のSQLでの確認

解決済

回答 2

投稿 2017/11/25 11:18 ・編集 2017/11/25 11:35

  • 評価
  • クリップ 0
  • VIEW 91

kazoogon

score 142

おかしなデータがDBに入っている場合の確認方法についての質問です。

商品規格テーブル(products_class)に
product_class_id(auto_increment)
product_code
category1
category2
create_date
shop_id
カラムがある。

本来同じproduct_code, category1, category2の組み合わせは2つ以上あってはいけない、しかし

mysql>select product_class_id,category1,category2 from products_class where product_code=100 and shop_id=24;
+------------------+---------------------+---------------------+
| product_class_id | category1           | category2           |
+------------------+---------------------+---------------------+
|                 1  | 0                     | B                   |
|                 2  | 0                     | B                   |
|                 3  | 0                     | B                   |
+------------------+---------------------+---------------------+

と存在している。ここで
①shop_id=24に全てのproduct_codeに上記のように3つ重複しているデータが存在しているかの確認
②もしそうであったら古い2つをdelete
②shop_id=24以外にも同じ現象が起きてないかを確認

このSQL文を皆さまならどうするか投稿していただけたらありがたいです、手段が1つではなさそうなので。
また不明部分がございましたら、ご指摘お願いいたします。

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

質問への追記・修正、ベストアンサー選択の依頼

  • SurferOnWww

    2017/11/25 11:35 編集

    今からでも遅くないので修正してください。質問の一番上の行に追記してもいいです。バージョンも書いてください。

    キャンセル

  • SurferOnWww

    2017/11/25 11:39

    最初から「おかしなデータ」は入れられないように、連結主キーにするというのはダメなのですか?

    キャンセル

  • kazoogon

    2017/11/25 11:42

    解決法でなくデータが存在しているかの有無の確認、削除が今の課題ですね。 その後対策という流れです

    キャンセル

回答 2

checkベストアンサー

+1

「○○ごとのレコード数・最大値・最小値・平均値」といった集計には GROUP BY 構文をつかいます。

product_code, category1, category2, shop_id の組み合わせの数を出すには

SELECT product_code, category1, category2, shop_id, COUNT(*) AS dup 
FROM products_class GROUP BY product_code, category1, category2, shop_id;

とします。さらに重複、つまり集計した組み合わせの数が2つ以上あるものをフィルタするには HAVING 構文を使います。

SELECT product_code, category1, category2, shop_id, COUNT(*) AS dup 
FROM products_class GROUP BY product_code, category1, category2, shop_id
HAVING dup >= 2;

次に削除ですが、下記サイトが役立ちそうです。

[SQL]重複データを1件だけ残して削除する方法 - Qiita


最後に一般論ですが、そもそもこのように重複したデータが登録できるようなデータベース構造が間違っています

最低限の対策として、重複を許さないのであればUNIQUE制約を付与しておくべきです。

またカラム名から察するに本来であればショップ情報を入れておくテーブルとプロダクト情報を入れておくテーブルは正規化して分けるべきです。そうしないと今後もデータベース不整合が発生して大きなトラブルに発展しかねません。

投稿 2017/11/25 11:59

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

0

重複のある現状のデータを正規化するためのメンテナンス中で、そのための手法を聞いているのか、
正規化されていない外部データを定期的にとりこむ時の実装法についての質問なのか、
どちらでしょう。

前者なら、
product_code, category1, category2 を複合主キーに(あるいは、UNIQUE制約を付与)した空のテーブルを作成しておいて、そこに、現状のテーブルをproduct_class_id(auto_increment)で降順に並び替えたものを INSERT ... SELECT文で追加すれば、重複データははじかれて追加されます。
これが一番簡単ではないでしょうか。
できたテーブルは、正しくUNIQUE制約がついたものになります。

INSERT INTO tbl_temp2 (product_code, category1, category2, create_date, shop_id)
  SELECT product_code, category1, category2, create_date, shop_id
  FROM products_class ORDER BY product_class_id DESC;

後者でも、同様に、UNIQUE制約のついたテーブルに追加していくのがいいでしょう

投稿 2017/11/26 22:11

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

15分調べてもわからないことは、teratailで質問しよう!

ただいまの回答率

91.36%

関連した質問

同じタグがついた質問を見る

  • MySQL

    4382questions

    MySQL(マイエスキューエル)は、TCX DataKonsultAB社などが開発するRDBMS(リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

  • SQL

    1693questions

    SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。