BigQuery(Standard SQL)でSPLIT関数を使った後、特定のレコードのみ情報抽出したい

Question

以下のSQLで「SPLIT」した（ネスト化された）レコードのうち、
3レコード目以降（4レコード目、5レコード目...）が存在するレコードのみ、
抽出したいと思っています。

SPLIT(Search_Word, " ") as Search_Word_SPLIT

【補足1】
1つの検索キーワードが『東京都 イタリアン クーポン デート』
である場合『クーポン デート』の部分のみ抽出したいと思います。
＊各キーワードは半角スペース(" ")でDBに格納されています。

おそらくですが、作業手順は、

1. 1レコード目を起点とする
2. 「LEAD()関数」を使って、3レコード目を確認する
3. (3レコード目が)nullではない場合、そこを抽出する
4. 4レコード目以降もあれば、併せて抽出する

上記のフローでSQLを書くかと思います。

申し訳ありませんが、どうぞよろしくお願いします。

Comments

[sazi]

どのような結果としたいのか不明瞭なので、データで例示して下さい。

[SatoshiMaruyama]

取得したい結果イメージを添付いたしました。どうぞよろしくお願いします。

Answer 1

かなり無理矢理なのですが、参考にしていただける部分があるのではと思います。

#standardSQL
  WITH data1 AS (
  SELECT
    '東京都 イタリアン クーポン デート' AS Search_Word
  UNION ALL
  SELECT
    '東京都 エスニック ワード1 ワード2 ワード3' ),
  data2 AS (
  SELECT
    Search_Word,
    SPLIT(Search_Word, ' ') AS Search_Word_SPLIT
  FROM
    data1 ),
  data3 AS (
  SELECT
    Search_Word,
    Search_Word_SPLIT[SAFE_ORDINAL(3)] AS keyword3,
    Search_Word_SPLIT[SAFE_ORDINAL(4)] AS keyword4,
    Search_Word_SPLIT[SAFE_ORDINAL(5)] AS keyword5,
    Search_Word_SPLIT[SAFE_ORDINAL(6)] AS keyword6,
    Search_Word_SPLIT[SAFE_ORDINAL(7)] AS keyword7
  FROM
    data2),
  data4 AS (
  SELECT
    Search_Word,
    CASE i
      WHEN 3 THEN keyword3
      WHEN 4 THEN keyword4
      WHEN 5 THEN keyword5
      WHEN 6 THEN keyword6
      WHEN 7 THEN keyword7
    END AS keyword
  FROM
    data3
  CROSS JOIN
    UNNEST(GENERATE_ARRAY(3,
        7)) AS i)
SELECT
  *
FROM
  data4
WHERE
  keyword IS NOT NULL;

Comments

[SatoshiMaruyama]

ご返信が大変遅くなりました。申し訳ありません。
上記コード、大変参考になりました。

実際、今回実現したかった内容は、「keyword3」「keyword4」...と別カラムで持ちたかった為、
【data3】を最終処理とした後、全取得しました。ありがとうございました。

Answer 2

配列中に指定したキーワードが含まれているかどうかを判定するのに、配列に対する比較演算子が準備されていれば良いのですが、そういった演算子は無いので、unnest()を使用して一旦行に展開してから比較するということになります。
試せていませんが、以下の様になるかと思います。

select * from [テーブル] t1
where exists (
        select 1 from [テーブル]
        where [キー項目]=t1.[キー項目]
          and exists(
                select 1 from unnest(split(Search_Word, ' ')) AS Search_Word 
                where Search_Word='クーポン'
              )
          and exists(
                select 1 from unnest(split(Search_Word, ' ')) AS Search_Word 
                where Search_Word='デート'
              )
       )

参考（標準 SQL での配列の操作ー配列のフィルタ処理）

Comments

[SatoshiMaruyama]

ご返信が大変遅くなりまして、申し訳ありません。

ご指摘の通り、今回、配列に対する、比較用のテーブルが有りません。
したがって、次フェーズで比較テーブルを作成し、
それを「exists」サブクエリで判定させようと思います。

大変参考になりました。ありがとうございます。
ご返信、遅くなり申し訳ありません。

[sazi]

提示したSQLは比較用のテーブルは不要です。
配列比較の演算子が無いのでそのために展開しているのです。

[SatoshiMaruyama]

補足ありがとうございます。すみません。こちらの説明不足です。比較テーブルが不要な点、承知しております。次フェーズとして、比較テーブルも準備できれば良いという意味です。ありがとうございました。