BigQuery

BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

RSS

  • 解決済

    回答
    2

    BigQuery(Standard SQL)でSPLIT関数を使った後、特定のレコードのみ情報抽出し...

    以下のSQLで「SPLIT」した（ネスト化された）レコードのうち、 3レコード目以降（4レコード目、5レコード目...）が存在するレコードのみ、 抽出したいと思っています。 SPLIT(Search_Word, " ") as Search_Word_SPLIT 【補足1】 1つの検索キーワードが『東京都 イタリアン クーポン デート』 である場

    • 0評価
    • 103PV
    • SQL

      2094questions

      SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    SatoshiMaruyama SatoshiMaruyama 11時間前に コメント

  • 受付中

    回答
    2

    DB(BigQuery-Standard SQL)における一般的な「重複IDの管理方法」について

    DB(BigQuery-Standard SQL)における一般的な「重複IDの管理方法」について質問させて下さい。 以下のように「都道府県」と「市区」をDB管理する場合、 「アンネスト(フラット化)構造」と「ネスト構造」どちらで管理するべきか迷っています。 似たようなID管理を行っている方がおりましたら、管理手法をご教授頂きたいです。 以下

    • 0評価
    • 40PV
    • SQL

      2094questions

      SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    sazi sazi 3日前に コメント

  • 受付中

    回答
    0

    firebase authentication の情報をBigQueryに流し込めず困っています。

    解析のために認証情報を取り扱うために使っているfirebaseのauthenticationの認証情報をBigQueryに流し込みたいと考えているのですが、うまくいっておりません。 https://support.google.com/firebase/answer/6318765?authuser=0 に書かれているようにBigQueryとfireba

    • 0評価
    • 44PV
    • Authentication

      65questions

      Authentication(認証)は正当性を認証する為の工程です。ログイン処理等で使われます。

    • Firebase

      429questions

      Firebaseは、Googleが提供するBasSサービスの一つ。リアルタイム通知可能、並びにアクセス制御ができるオブジェクトデータベース機能を備えます。さらに認証機能、アプリケーションのログ解析機能などの利用も可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    teratailが2週間前に アップデート

  • 受付中

    回答
    0

    Google Data StudioのデータソースでBig Query を読み込めない

    Google Data StudioからBig Queryのデータを読み込みたいのですが、 データソースの指定までし、レポートに表示する段階で、「データセットにアクセスする権限がありません。」 とうエラーが出てしまします。 Big QueryのIAMでアクセス権限は全てに付与しているのですが、解消しないです。 わかる方いましたら、ご教授いただけると幸

    • 0評価
    • 42PV
    • Google

      490questions

      Googleは、アメリカ合衆国に位置する、インターネット関連のサービスや製品を提供している企業です。検索エンジンからアプリケーションの提供まで、多岐にわたるサービスを提供しています。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    teratailが2週間前に アップデート

  • 解決済

    回答
    1

    Google bigQuery でテーブルが見つからないというエラーが発生する

    前提・実現したいこと bigQueryのWebUIを用いて、SELECT文を実行したい 発生している問題・エラーメッセージ Not found: Table テーブル名. Please verify that the table exists and the correct location was used for the job. 該当のソース

    • 0評価
    • 124PV
    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    Yuki_S Yuki_S 1ヶ月前に ベストアンサー

  • 解決済

    回答
    2

    Tableauで前週比を出すロジック

    Tableauで前週比を出すロジックがどうしても解りません。 date　value 4/1 　100 4/8 　200 上記の場合まず、 date　value　前週の値 4/1 　100 4/8 　200　　100 このようになると思います。 この「前週の値」をどのように取得すれば良いでしょう？ よろしくお願いします。

    • 0評価
    • 73PV
    • SQL

      2094questions

      SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    SatoshiMaruyama SatoshiMaruyama 1ヶ月前に 回答

  • 解決済

    回答
    1

    BigQueryのレコード数取得

    BigQueryのデータ取得処理を任意のレコード取得上限数を決め、 上限数未満でなければOFFSETを更新して繰り返し取得する といった流れにしたいのですが レコード数を取得するためのCOUNTに当たるものがなく また、Goのドキュメントを見てもそれにあたるような記述がありませんでした。 どなたかレコード数の取得方法を知っていればご教授お願いいたします。

    • 0評価
    • 225PV
    • Go

      430questions

      Go(golang)は、Googleで開発されたオープンソースのプログラミング言語です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    tomagurosu tomagurosu 2ヶ月前に コメント

  • 解決済

    回答
    2

    BigQuery（標準SQL）で、テーブルが存在するか判定したい

    サブクエリでTrue/False判定して、Falseの場合は例外処理したいと思います。 具体的には.. 1.サブクエリの結果、当日の「日付のテーブル」が存在しない場合、 2.(例外的に)前日の「日付のテーブル」をメインのクエリで呼びにいく 3.(当日の「日付のテーブル」が存在する場合は)(そのまま)当日のテーブルを呼びにいく ＊不明点 1.のサブ

    • -1評価
    • 142PV
    • SQL

      2094questions

      SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    SatoshiMaruyama SatoshiMaruyama 2ヶ月前に コメント

  • 解決済

    回答
    1

    GoogleBigQueryで週ごと・週別の集計をしたい

    前提・実現したいこと ・以下のmysqlで動くQueryをGoogleBigquery用に書き換えていただきたいです。 mysql SELECT DATE(created) - INTERVAL WEEKDAY(created) DAY - INTERVAL 1 DAY AS wday, COUNT(distinct user_id)

    • 0評価
    • 146PV
    • MySQL

      5226questions

      MySQL（マイエスキューエル）は、TCX DataKonsultAB社などが開発するRDBMS（リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

    • SQL

      2094questions

      SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    miyu21 miyu21 2ヶ月前に ベストアンサー

  • 解決済

    回答
    2

    SQL (BigQuery) で2つのテーブルを合わせたテーブルを作りたい

    SQLをつかって以下のようなテーブルの作成（結合）がしたいです。 BigQueryでWITH句を使って一時テーブルを作成したいです。 現在以下の2つのテーブルがあります。 1 : コンテンツIDの一覧テーブル content_table コンテンツID 1 2 : 2 : ユーザーのコンテンツの評価 (ユーザー

    • 0評価
    • 255PV
    • SQL

      2094questions

      SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    sazi sazi 3ヶ月前に ベストアンサー

  • 解決済

    回答
    3

    SQLでカラム内の「英語表記」を「日本語表記」に一括変換したい（現状はREPLACEを使用）

    SQLで、カラム内の「英語表記」を「日本語表記」に一括変換したいと思います。 例） English1→日本語1 English2→日本語2 REPLACE( Var, 'English1', '日本語1') 現状、以下のようなネスト構造で記述しています。 REPLACE( REPLACE( REPLACE( REPLACE( REPLACE( REP

    • 0評価
    • 278PV
    • MySQL

      5226questions

      MySQL（マイエスキューエル）は、TCX DataKonsultAB社などが開発するRDBMS（リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

    • SQL

      2094questions

      SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    SatoshiMaruyama SatoshiMaruyama 3ヶ月前に コメント

  • 解決済

    回答
    2

    BigQuery（標準SQL）で、AUTO_INCREMENTのように自動で1から数値を割り振ってい...

    前提・実現したいこと BigQuery（標準SQL）で、AUTO_INCREMENTのように自動で1から数値を割り振っていきたいです。 実現したいことは「Googleアナリティクスのセッション定義を自分で作ること」です。 基本的なセッション定義（30分以内、同一デバイス等）は把握しています。

    • 0評価
    • 247PV
    • SQL

      2094questions

      SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    SatoshiMaruyama SatoshiMaruyama 5ヶ月前に コメント

  • 受付中

    回答
    1

    RubyのBigqueryクライアント（google-cloud-bigquery）でDATE_AD...

    GCP提供のgemでクエリを投げているのですが、DATE_ADD関数がinvalidQueryとなってしまいます。 他のクエリは問題なく実行できます。 該当コード bigquery = Google::Cloud::Bigquery.new( project: 'foo', keyfile: 'bar' ) sql = "SELECT DAT

    • 0評価
    • 290PV
    • Ruby

      6547questions

      Rubyはプログラミング言語のひとつで、オープンソース、オブジェクト指向のプログラミング開発に対応しています。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    gouf gouf 5ヶ月前に 回答を編集

  • 受付中

    回答
    0

    BigqueryでGoogle Drive（スプレッドシート）とCSVデータを統合したテーブルを用意...

    前提・実現したいこと 数年分の顧客データの蓄積と解析をBigqueryで実施しようとしています。 Bigqueryに単一のテーブルとして顧客データを用意したいのですが、現状は複数のExcelファイルとして顧客データが保存されており、そのデータが日々更新されている状況です。このデータを週次で分析していきたいと考えています。これを下記の方法で実現できるのではない

    • 0評価
    • 272PV
    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    teratailが11ヶ月前に アップデート

  • 受付中

    回答
    0

    Bigqueryにてスプレッドシートをインポートしたい

    Bigqueryでスプレッドシートをインポートしたいです。 すると、以下のような文章が現れました。 Failed to create table: Invalid field name "". Fields must contain only letters, numbers, and underscores, start with a letter

    • 0評価
    • 306PV
    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    teratailが1年以上前に アップデート

  • 受付中

    回答
    0

    fluentd での message パラメータの排除もしくは、message パラメータの中身を抜...

    Fluentd から BigQuery へのデータの流し込みを行っており、以下のような JSON を body に持った HTTP リクエストを Fluentd 側で受ける場合に、BigQuery に message という key を削除して、流し込むにはどうすればよいかご存知の方がいらっしゃったら教えていただきたいです。 curl -X POST

    • 0評価
    • 566PV
    • Fluentd

      42questions

      Fluentdは、オープンソースのログ収集ツールです。ログの収集方法、ログの記録先などのログデータ処理を柔軟にカスタマイズでき、インプットおよびアウトプットが全てプラグインとして実装されています。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    teratailが1年以上前に アップデート

  • 解決済

    回答
    1

    ビッグデータの抽出

    前提・実現したいこと 現在、約200万件のcsv２つがあり、２つのcsv同士の比較を行なっております。 ただ、データが大量あることで、抽出に時間がかかっており、高速に抽出出来る方法を探しています。 該当のソースコード 抽出対象となるデータとしては下記になり、 下記Aのcsv_a_idがcsvBのcsv_b_idとマッチしないデータを抽出します。

    • 0評価
    • 567PV
    • MySQL

      5226questions

      MySQL（マイエスキューエル）は、TCX DataKonsultAB社などが開発するRDBMS（リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

    • CSV

      540questions

      CSV(Comma-Separated Values)はコンマで区切られた明白なテキスト値のリストです。もしくは、そのフォーマットでひとつ以上のリストを含むファイルを指します。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    nao20 nao20 1年以上前に 質問を編集

  • 受付中

    回答
    0

    コホート分析のためのBigQueryのクエリ書き方について

    Bigqueryでコホート分析をしたいと思っています。 そこで、経過日数と前日までの人数を合計したクエリの書き方を教えてください。 具体的には、2016/9/1-2016/9/5までの購入者を日別に積み増しで出したいです。 抽出後の成果物イメージ 1日目 2日目 3日目 4日目 5日目 10人 30人 40人 60人 70人

    • 0評価
    • 787PV
    • SQL

      2094questions

      SQL(Structured Query Language)は、リレーショナルデータベース管理システム (RDBMS)のデータベース言語です。大きく分けて、データ定義言語(DDL)、データ操作言語(DML)、データ制御言語(DCL)の3つで構成されており、プログラム上でSQL文を生成して、RDBMSに命令を出し、RDBに必要なデータを格納できます。また、格納したデータを引き出すことも可能です。

    • BigQuery

      18questions

      BigQueryは、Google Cloud Platformが提供しているビッグデータ解析サービス。数TB（テラバイト）またはPB（ペタバイト）の膨大なデータに対し、SQL風のクエリを実行し、高速で集計・分析を行うサービスです。

    teratailが1年以上前に アップデート
  • 1

タグ情報

  • あなたの順位

    -位

  • タグ登録者数

    17人

  • 総質問数

    18件

  • 今週の質問数

    1件

関連するタグ

  • MySQL

    5226questions

    MySQL（マイエスキューエル）は、TCX DataKonsultAB社などが開発するRDBMS（リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

  • Power BI

    5questions

  • VPN

    63questions

    VPN(Virtual Private Network)は、仮想プライベートネットワークとも呼ばれ、インターネットに接続してるユーザー間に仮想的な通信トンネルを構築した組織内ネットワークです。認証や暗号化を用いて通信経路を保護し安全なネットワークの構築ができます。

  • Google スプレッドシート

    1questions

  • セマフォ

    1questions

    セマフォは、並行プログラミングにおいて同期のサポートを行うための機構。また、それによりプロセス間で交換される信号を指します。複数のプロセスでファイルなどを共有している際の同時アクセスによる破壊や不整合を防ぐことが可能です。

  • GDB

    18questions

    GDBはGNUソフトウェアシステムのための標準的なデバッガーです。

  • pip

    147questions

    pipとは、Pythonを用いて書かれているパッケージソフトのインストールや管理を行うためのパッケージマネジメントシステムです。pipを使う主なメリットは、コマンドラインインターフェースにて容易にPythonパッケージソフトをインストール可能だという点です。

  • LotusScript

    1questions

    LotusScriptは、IBMのロータスシリーズのソフトウェアに備わっている埋め込み型BASICスクリプト言語の一つ。強力な言語拡張機能により、オブジェクト指向のアプリケーションの開発が可能です。

  • PostGIS

    5questions

    PostGISは、 PostgreSQLデータベースに地理空間情報を導入するための拡張です。ジオメトリ型、幾何関数、空間インデクスなどの機能が導入され、場所・移動・地域の情報などが扱い易くなります。

  • composer

    130questions

    Composerとは、PHP5.3.2以上で使用可能なパッケージ管理ツールです。指定ディレクトリ内だけでパッケージ管理します。

BigQueryタグのよく見られている質問

思考するエンジニアのためのQ&Aサイト「teratail」について詳しく知る