技術 プログラムpython [python]不要なメモリを解放して最適化するコード PR 2023-11-25 2023-11-25 # ガーベージコレクターのライブラリをインポート import gc # 不要なオブジェクトを解放し、メモリ最適化する。 gc.collect() google colabなどメモリに限りがある環境を利用してる場合は、このコードを適所に入れることで最適化する。 この記事が気に入ったら『目黒で働く分析担当の作業メモ』にご支援をお願いします! ※OFUSEに飛びます
技術 [bigquery]配列項目をグルーピングする方法 bigqueryでは配列をGROUP BYしようとすると、以下のようなエラーになります。 SELECT status, count(1) a...
技術 [python]項目から重複するリストを取得する unique: SQLでいうところのdistinctをpythonコードで ### unique関数を利用して一意な項目を出力する df.u...
技術 [bigquery]特定の数値でランキングをつけて、さらに100分率を算出するコード SELECT product, value, RANK() OVER (PARTITION BY product ORDER BY valu...
技術 [python]google colab上で、Lightgbmの2値分類タスク実行時のベースコード 2023/10/25時点でのgoogle colabのバージョンでのlightgbmベースコードメモです。 githubにも同じコード置いて...