技術 SQLbigquery 【bigquery】四分位数の求め方 bigqqueryで四分位数を算出するコードがあまりなかったのでメモ投稿です SELECT key , min -- 配列にしたpercent情報からoffsetで割合算出 , percent... 2021-11-29
技術 カレンダーアカウント連携 [便利]googleカレンダーとoutlookカレンダーのアカウント連携をする方法 ・所属部署ではoutlookカレンダーを使っているが、別部署ではgoogleカレンダーを使っている。・仕事の都合上、両方に関わる必要があるが、複数カレンダーでそれぞれ予定管理するのは手間だし効率も悪い... 2021-10-17
技術 SQLbigqueryデータ不備 [bigquery]データ不備による抽出失敗例→between編 betweenを利用する項目は日付型にする必要がありますが、文字型の日付データをDATE関数などでCASTしてから利用する場合にハマるときがありましたのでメモ残します。 ▼ between対象項目にn... 2021-09-27
技術 google可視化データポータル [データ可視化]googleスプレッドシートをデータポータル に接続する方法 Googleスプレッドシートにデータを用意すれば、データポータル で無料で可視化できます。(2021/9/25現在) 今回、Googleスプレッドシートからデータポータル に接続する手順を紹介します。... 2021-09-25
技術 pythoncolabデータ可視化 [python]google colabのサンプルデータを使ってPandas-Profiling使ってみた google colabに初期提供されている(2021/9/22時点)カルフォルニアハウジングのテストデータを使って、Pandas-Profilingでサクッとcolab上に可視化してみましたので参考... 2021-09-22
技術 pythoncolabデータ可視化 [python]google colabのサンプルデータを使ってAutoViz使ってみた google colabに初期提供されている(2021/9/21時点)カルフォルニアハウジングのテストデータを使って、AutoVizでサクッとcolab上に可視化してみました。colabの設定が変わら... 2021-09-21
技術 SQLbigquery [bigquery]累積値を算出する SELECT id , date , price -- 累積金額の算出 id単位でdate順に並べ替えて、priceを累積していく , SUM(price) OVER (PARTITION BY id... 2021-09-18
技術 SQLbigquery [bigquery]テーブルの差集合を出す方法 NOT EXISTS : table1のレコードからtable2に存在する情報をKEYで比較して抽出対象外にする方法 SELECT t1.id FROM dataset.table AS t1 W... 2021-09-17
技術 SQLbigquery [bigquery]テーブルのJOIN JOIN : table1のidとtable2のidが一致するもののみを結合して結果を返す SELECT t1.id , t2.sales FROM dataset.table AS t1 JOIN... 2021-09-16
技術 SQLbigquery [bigquery]0除算回避をする SELECT target_date , sales , paid_user , sales / paid_user AS ARPU -- > どちらかの項目に0が入ってると 0除算エラーになり処理で... 2021-09-15
技術 SQLbigquery [bigquery]数値に1000単位でカンマを入れる方法 SELECT FORMAT("%'d", SUM(price)) AS item_price -- 100,000,000 という感じで数値表記変換する... 2021-09-14
技術 SQLbigquery [bigquery]テーブルからカラム名をワイルドカード検索する SELECT table_schema , table_name , column_name FROM dataset.INFORMATION_SCHEMA.COLUMNS WHERE table_n... 2021-09-13