技術 SQLPrestoトレジャーデータ [トレジャーデータ ]jsonデータの抽出コード -- JSON形式で保存されたデータ(json_info)からデータを抽出するサンプルコード SELECT json_info , JSON_EXTRACT_SCALAR(json_info, '$... 2020-03-04
技術 プログラムPrestoトレジャーデータ 【トレジャーデータ 】特定曜日や月初1日のデータのみを抽出する方法 日々集計してテーブルを作っているが、BIツールなどに表示するデータは週1回とか月1回で良い といった場合、以下のようにして、対象データを絞ることができる。 毎週日曜日のデータを取得 CREATE TA... 2019-06-08
技術 SQLPrestoトレジャーデータ 【トレジャーデータ】Prestoでランダムサンプリングする方法 50%のデータをランダムで取得する方法 SELECT * FROM DB.table TABLESAMPLE BERNOULLI(50)... 2019-03-15
技術 SQLPrestoトレジャーデータ 【トレジャーデータ 】テーブル名称やカラムが存在するテーブルを検索する便利コード information_schemaからいろいろ抽出するときによく使うコード 対象テーブル名が存在するものをすべて抽出する SELECT CONCAT(table_schema, '.', table... 2018-12-21
技術 Prestoトレジャーデータ 【トレジャーデータ 】よく使うUDFのメモ(随時更新) トレジャーデータ で高速検索を行う場合は、 パーティションの切られているtimeを利用する。また、日付関数はUDFが用意されており、 それを使うことで効率よく処理を行える。 対象日付のレコードを抽出す... 2018-12-13
技術 SQLPrestoトレジャーデータ 【トレジャーデータ】timeを使わない場合での日付操作コマンドメモ ◆特徴 トレジャーデータでパーティションされるのは、デフォルト設定のtimeのみである。それ以外の項目に対して、検索をしてもインデックスがない為、高速な検索ができない。 ◆課題点 過去分のデータを手動... 2018-12-07