技術 SQLbigqueryデータ不備 [bigquery]データ不備による抽出失敗例→between編 betweenを利用する項目は日付型にする必要がありますが、文字型の日付データをDATE関数などでCASTしてから利用する場合にハマるときがありましたのでメモ残します。 ▼ between対象項目にn... 2021-09-27
技術 google可視化データポータル [データ可視化]googleスプレッドシートをデータポータル に接続する方法 Googleスプレッドシートにデータを用意すれば、データポータル で無料で可視化できます。(2021/9/25現在) 今回、Googleスプレッドシートからデータポータル に接続する手順を紹介します。... 2021-09-25
技術 pythoncolabデータ可視化 [python]google colabのサンプルデータを使ってPandas-Profiling使ってみた google colabに初期提供されている(2021/9/22時点)カルフォルニアハウジングのテストデータを使って、Pandas-Profilingでサクッとcolab上に可視化してみましたので参考... 2021-09-22
技術 pythoncolabデータ可視化 [python]google colabのサンプルデータを使ってAutoViz使ってみた google colabに初期提供されている(2021/9/21時点)カルフォルニアハウジングのテストデータを使って、AutoVizでサクッとcolab上に可視化してみました。colabの設定が変わら... 2021-09-21
技術 SQLbigquery [bigquery]累積値を算出する SELECT id , date , price -- 累積金額の算出 id単位でdate順に並べ替えて、priceを累積していく , SUM(price) OVER (PARTITION BY id... 2021-09-18
技術 SQLbigquery [bigquery]テーブルの差集合を出す方法 NOT EXISTS : table1のレコードからtable2に存在する情報をKEYで比較して抽出対象外にする方法 SELECT t1.id FROM dataset.table AS t1 W... 2021-09-17
技術 SQLbigquery [bigquery]テーブルのJOIN JOIN : table1のidとtable2のidが一致するもののみを結合して結果を返す SELECT t1.id , t2.sales FROM dataset.table AS t1 JOIN... 2021-09-16
技術 SQLbigquery [bigquery]0除算回避をする SELECT target_date , sales , paid_user , sales / paid_user AS ARPU -- > どちらかの項目に0が入ってると 0除算エラーになり処理で... 2021-09-15
技術 SQLbigquery [bigquery]数値に1000単位でカンマを入れる方法 SELECT FORMAT("%'d", SUM(price)) AS item_price -- 100,000,000 という感じで数値表記変換する... 2021-09-14
技術 SQLbigquery [bigquery]テーブルからカラム名をワイルドカード検索する SELECT table_schema , table_name , column_name FROM dataset.INFORMATION_SCHEMA.COLUMNS WHERE table_n... 2021-09-13
技術 SQLbigquery [bigquery]特定のカラム名を持っているテーブル情報を探す方法 SELECT CONCAT(table_catalog, '.', table_schema, '.', table_name) as table_name , column_name , is_nu... 2021-09-12
技術 SQLbigquery [bigquery]小数点以下の文字列の四捨五入や切り捨て SELECT price , ROUND(price) -- 小数点以下四捨五入 , TRUNC(price) -- 小数点以下切り捨て... 2021-09-11