技術 python 【Python】wikipediaから設定したワードを取得する方法 google colabのコード # インストール !pip install wikipedia import wikipedia # 日本語設定 wikipedia.set_lang("ja") #... 2021-12-30
技術 SQLpython 【SQLとPython】データ変換・抽出まとめ 用途 SQLでのデータ抽出は慣れてるけど、Pythonでのデータ抽出方法がわからない。（データアナリスト職の方） 逆にPythonは得意だけど、SQLは触ったことない。（エンジニア職でデータ分析やって... 2021-11-30
技術 SQLbigquery 【bigquery】ランダムサンプリングする方法 bigqqueryでデータをランダムサンプリングするコードメモです。 SELECT * FROM dataset.table WHERE -- 以下を指定することでテーブルの10%のデータをランダムに... 2021-11-30
技術 SQLbigquery 【bigquery】四分位数の求め方 bigqqueryで四分位数を算出するコードがあまりなかったのでメモ投稿です SELECT key , min -- 配列にしたpercent情報からoffsetで割合算出 , percent... 2021-11-29
技術 カレンダーアカウント連携 [便利]googleカレンダーとoutlookカレンダーのアカウント連携をする方法 ・所属部署ではoutlookカレンダーを使っているが、別部署ではgoogleカレンダーを使っている。・仕事の都合上、両方に関わる必要があるが、複数カレンダーでそれぞれ予定管理するのは手間だし効率も悪い... 2021-10-17
技術 SQLbigqueryデータ不備 [bigquery]データ不備による抽出失敗例→between編 betweenを利用する項目は日付型にする必要がありますが、文字型の日付データをDATE関数などでCASTしてから利用する場合にハマるときがありましたのでメモ残します。 ▼ between対象項目にn... 2021-09-27
技術 google可視化データポータル [データ可視化]googleスプレッドシートをデータポータル に接続する方法 Googleスプレッドシートにデータを用意すれば、データポータル で無料で可視化できます。(2021/9/25現在） 今回、Googleスプレッドシートからデータポータル に接続する手順を紹介します。... 2021-09-25
技術 pythoncolabデータ可視化 [python]google colabのサンプルデータを使ってPandas-Profiling使ってみた google colabに初期提供されている(2021/9/22時点）カルフォルニアハウジングのテストデータを使って、Pandas-Profilingでサクッとcolab上に可視化してみましたので参考... 2021-09-22
技術 pythoncolabデータ可視化 [python]google colabのサンプルデータを使ってAutoViz使ってみた google colabに初期提供されている(2021/9/21時点）カルフォルニアハウジングのテストデータを使って、AutoVizでサクッとcolab上に可視化してみました。colabの設定が変わら... 2021-09-21
技術 SQLbigquery [bigquery]累積値を算出する SELECT id , date , price -- 累積金額の算出 id単位でdate順に並べ替えて、priceを累積していく , SUM(price) OVER (PARTITION BY id... 2021-09-18
技術 SQLbigquery [bigquery]テーブルの差集合を出す方法 NOT EXISTS ： table1のレコードからtable2に存在する情報をKEYで比較して抽出対象外にする方法 SELECT t1.id FROM dataset.table AS t1 W... 2021-09-17
技術 SQLbigquery [bigquery]テーブルのJOIN JOIN ： table1のidとtable2のidが一致するもののみを結合して結果を返す SELECT t1.id , t2.sales FROM dataset.table AS t1 JOIN... 2021-09-16
