技術 SQLbigquery [bigquery]日付変換(年月情報だけを取得する) 2021-08-01 2021-12-18 - 事前にDECLAREで変数定義 DECLARE created_at TIMESTAMP; -- 変数に値を設定 SET created_at = TIMESTAMP('2019-11-01 00:00:00'); SELECT FORMAT_DATE("%Y-%m", created_at) AS ym ◆実行結果
技術 [SQL]temp(一時)テーブル利用して処理を簡略&効率化する 1)テーブルのレコード件数を確認(以下では、80億件以上あると仮定) select count(*) from pay_log; 8,089...
技術 [python]トレジャーデータ (presto)にjupyterからアクセスする手順 jupyterでpandas-tdをインストールする !pip install pandas-td 必要なライブラリの読み込み import...
技術 [python]WEB上にあるExcelファイルをpythonコードで取得する方法 import requests url = 'https://www.jpx.co.jp/markets/statistics-equiti...
技術 pythonでWEBスクレイピングやってみた(html取得) ツイッターの文字、WEBサイトの情報、アップストアー等のレビュー文言を取得するのに スクレイピングを行い、そのデータを基にしてテキストマイニ...
技術 [SQL]index張っても重い場合→レコードの重複状態確認 index張っても、以下のようなデータの場合「商品IDを利用して他テーブルと混ぜ合わせてレコード抽出」しようとすると、めっちゃ重くなります!...