技術 プログラムpython [python]不要なメモリを解放して最適化するコード PR 2023-11-25 2023-11-25 # ガーベージコレクターのライブラリをインポート import gc # 不要なオブジェクトを解放し、メモリ最適化する。 gc.collect() google colabなどメモリに限りがある環境を利用してる場合は、このコードを適所に入れることで最適化する。 この記事が気に入ったら『目黒で働く分析担当の作業メモ』にご支援をお願いします! ※OFUSEに飛びます
技術 [bigquery]コンソール上で大文字を小文字に変換する方法 変換したコードを範囲選択して右クリック 以下が表示されるので、Command Palette をクリック Command Paletteから...
技術 【bigquery】テーブル名にワイルドカード指定が可能 パーティショニングされたテーブルや日付毎に保存したテーブルから一気にデータを 抽出する場合、普通に処理しようとすると以下のように大量なコード...
技術 [SQL]temp(一時)テーブル利用して処理を簡略&効率化する 1)テーブルのレコード件数を確認(以下では、80億件以上あると仮定) select count(*) from pay_log; 8,089...
技術 【セミナーレポ】#bq_sushi tokyo #2 2015/11/19 dots.(渋谷) 〇セミナ―内容:Google BigQueryの話を聞きながらお鮨やビール等をいただくネットワーキングの会 完全メモ用↓ ◆運用現場における...
技術 [python]metabase apiを使って内部SQLで特定文字列の利用状況を調査する方法 metabase(BIツール)で内部に作成したSQL情報はAPI経由で一括抽出できたのでサンプルコードを残します。 用途としては、特定文字列...