NEW 技術 プログラムgit [git]プルリクエストの取消とブランチ削除 事前にコードレビュー用にプルリクなどを投げていて、そのコードが不要になったので、削除する。または、本番への反映をしないが誰かにコードレビューして欲しい場合に出したプルりくを、後ほど取り消す場合などに利... 2023-12-06
技術 SQLプログラムbigquery [bigquery]プロシージャーに引数を入れて実行する 1) プロシージャに引数を設定するコード例 CREATE OR REPLACE PROCEDURE dataset.procedure(target_date DATE) BEGIN /* ここに繰り... 2023-12-04
技術 SQLプログラムbigquery [bigquery]サクッと月末最終日を取得する SELECT LAST_DAY('2023-11-25') AS last_date, -- 指定日付の月末日を取得 LAST_DAY('2020-02-01') AS leap_date -- 閏年... 2023-11-30
技術 プログラムpython [python]不要なメモリを解放して最適化するコード # ガーベージコレクターのライブラリをインポート import gc # 不要なオブジェクトを解放し、メモリ最適化する。 gc.collect() google colabなどメモリに限りがある環境を... 2023-11-25
技術 SQLプログラムbigquery [bigquery]件数を絞ってランダム抽出するクエリ 対象データをランダムに100件取得する SELECT * FROM dataset.table ORDER BY rand() LIMIT 100... 2023-11-13
技術 SQLプログラムbigquery [bigquery]特定項目のみをSELECT対象外にする方法 SELECT * EXCEPT(item_id) ## EXCEPTで指定した項目をSELECT対象外にする FROM dataset.table 項目をたくさん持っているテーブルの中から、特定項目を... 2023-11-03
技術 プログラムpython機械学習 [python]google colab上で、Lightgbmの2値分類タスク実行時のベースコード 2023/10/25時点でのgoogle colabのバージョンでのlightgbmベースコードメモです。 githubにも同じコード置いてあります 今回blog作成のモチベーションは以下。 ligh... 2023-10-25
技術 プログラムpython [python]pandaDataFrameをnumpy配列に変更する方法 ## データ型の確認 print(type(data)) > <class 'pandas.core.frame.DataFrame'> ## numpy配列に変換する data = data.... 2023-10-23
技術 SQLプログラムbigquery [biguqery]アソシエーション分析用のデータ抽出クエリ with association1 as ( -- 合計購入者数 select count(distinct userId) as allPu from dataset.table ) , assoc... 2023-09-29
技術 SQLプログラムbigquery [bigquery]商品IDから組合わせレコードを作る方法 WITH pairs AS ( SELECT a1.productId AS productId_1, a2.productId AS productId_2, COUNT(*) AS cnt FRO... 2023-09-26
技術 プログラムpython [python]pandasでobject型をfloat型に変換する方法 import pandas as pd # DataFrameの作成 df = pd.DataFrame({'col1': }) # '判断A'を0に、 '判断B'を1に変換する mapping = ... 2023-09-25
技術 プログラムpython生成AI [python]Open InterpreterでCode Llamaを利用してみた 話題になっていた、Open Interpreterを触ってみたので手順メモ残します。 Open Interpreterとは ・GPT-3.5や4.0, Llamaなどの大規模言語モデル活用して開発され... 2023-09-18
