技術 SQLpython 【SQLとPython】データ変換・抽出まとめ 用途 SQLでのデータ抽出は慣れてるけど、Pythonでのデータ抽出方法がわからない。(データアナリスト職の方) 逆にPythonは得意だけど、SQLは触ったことない。(エンジニア職でデータ分析やって... 2021-11-30
技術 SQLbigquery 【bigquery】ランダムサンプリングする方法 bigqqueryでデータをランダムサンプリングするコードメモです。 SELECT * FROM dataset.table WHERE -- 以下を指定することでテーブルの10%のデータをランダムに... 2021-11-30
技術 SQLbigquery 【bigquery】四分位数の求め方 bigqqueryで四分位数を算出するコードがあまりなかったのでメモ投稿です SELECT key , min -- 配列にしたpercent情報からoffsetで割合算出 , percent... 2021-11-29
技術 SQLbigqueryデータ不備 [bigquery]データ不備による抽出失敗例→between編 betweenを利用する項目は日付型にする必要がありますが、文字型の日付データをDATE関数などでCASTしてから利用する場合にハマるときがありましたのでメモ残します。 ▼ between対象項目にn... 2021-09-27
技術 SQLbigquery [bigquery]累積値を算出する SELECT id , date , price -- 累積金額の算出 id単位でdate順に並べ替えて、priceを累積していく , SUM(price) OVER (PARTITION BY id... 2021-09-18
技術 SQLbigquery [bigquery]テーブルの差集合を出す方法 NOT EXISTS : table1のレコードからtable2に存在する情報をKEYで比較して抽出対象外にする方法 SELECT t1.id FROM dataset.table AS t1 W... 2021-09-17
技術 SQLbigquery [bigquery]テーブルのJOIN JOIN : table1のidとtable2のidが一致するもののみを結合して結果を返す SELECT t1.id , t2.sales FROM dataset.table AS t1 JOIN... 2021-09-16
技術 SQLbigquery [bigquery]0除算回避をする SELECT target_date , sales , paid_user , sales / paid_user AS ARPU -- > どちらかの項目に0が入ってると 0除算エラーになり処理で... 2021-09-15
技術 SQLbigquery [bigquery]数値に1000単位でカンマを入れる方法 SELECT FORMAT("%'d", SUM(price)) AS item_price -- 100,000,000 という感じで数値表記変換する... 2021-09-14
技術 SQLbigquery [bigquery]テーブルからカラム名をワイルドカード検索する SELECT table_schema , table_name , column_name FROM dataset.INFORMATION_SCHEMA.COLUMNS WHERE table_n... 2021-09-13
技術 SQLbigquery [bigquery]特定のカラム名を持っているテーブル情報を探す方法 SELECT CONCAT(table_catalog, '.', table_schema, '.', table_name) as table_name , column_name , is_nu... 2021-09-12
技術 SQLbigquery [bigquery]小数点以下の文字列の四捨五入や切り捨て SELECT price , ROUND(price) -- 小数点以下四捨五入 , TRUNC(price) -- 小数点以下切り捨て... 2021-09-11