技術 プログラムpython [python]項目から重複するリストを取得する unique: SQLでいうところのdistinctをpythonコードで ### unique関数を利用して一意な項目を出力する df.unique() nunique: こちらは count(di... 2023-01-06
技術 プログラムpython [python]特定パターンにマッチするファイルを一覧取得する ### ライブラリのインポート from glob import glob ### inputフォルダ内にあるファイルのリストを取得 pathsList = glob('input/*') 上記は、i... 2022-12-26
技術 プログラムbigquery [bigquery]functionの作成手順 bigqueryで定義関数を作成する方法 まずは、プロジェクト名の横３点リーダーをクリックすると、「データセットを作成」が表示されるのでそこをクリック次に以下のようなウインドウが出るので、作成したいデ... 2022-12-19
技術 git [Git]ISSUEをクローズと同時にボード上で移動させる方法 タスク管理でgithub-issueでの小ネタです。 ISSUEを移動させたいボード（例えばDoneなどの終了ISSUEを入れるところ）の右上の「横3点ボタン」をクリックManage automati... 2022-12-14
技術 プログラムgoogleスプレッドシート 【スプレッドシート】複数シートから集めた項目をユニークにして昇順に並び替える方法 - unique関数で取得したい項目を選択する- 複数シートの指定をする- 取得した項目を昇順で並び替える # コード例 =SORT(UNIQUE({'シートA'!A1:A100; 'シートB'!A1... 2022-12-09
技術 プログラムpython [python]LGBMでValueError: DataFrame.dtypes for data must be int, float or bool. Did not expect the data types in fields xxxx が出た時の対処方法メモ # 項目のタイプが処理できないというエラーのため、astypeで変換してあげればOK df = df.astype(float) # 対象項目が複数ある場合は、同じように変換する... 2022-12-05
技術 資格 [資格]G検定合格に向けたkindle unlimited本の紹介 2022/11/5に「G検定」を受けまして、無事合格できました。 その際にどういう感じで学習したのか？の流れと利用書籍を備忘として残したいと思います。今回、なるべく学習にはお金をかけないように、kin... 2022-11-23
技術 slack [slack]ステータスにメッセージを設定する slackのアイコンの横に簡易なメッセージを設定して表示させる方法 slackの右上の自分のアイコンをクリックする ステータスを更新するをクリック 表示したい情報を記入し有効期限を設定 伝えたいメッセ... 2022-11-07
技術 プログラムSQLbigquery [bigquery]テーブルの項目情報を取得 SELECT column_name, data_type, is_nullable FROM dataset.schema.INFORMATION_SCHEMA.COLUMNS -- データセットと... 2022-10-20
技術 プログラムSQLRedash [Redash]出力結果にフィルタを設定する方法 RedashではSQLの抽出結果に対して、AS句で項目名に「__multiFilter」と追加するだけで、簡単にフィルタを設定することができます。 SELECT Id as Id__multiFilt... 2022-10-18
技術 bigquerygoogle [GCP]スプレッドシートをbiguqeryに取り込む手順 biguqery環境にスプレッドシートをテーブルとして取り込む時にヘッダー項目がうまく取り込まれなかったので、その辺りを含めた作業メモ 追加したいデータベースを選択して以下流れでテーブルを作成を選択 ... 2022-10-05
技術 slack [slack]カスタム絵文字は「半角英数字登録」したほうがよさそう 2022/8/中ぐらいから、slackに登録したカスタム絵文字で、全角日本語で登録してあったものが、メッセージ投稿できなくなったようです。（公式に発表とかはなさそうなのでサイレント修正？） いつも通り... 2022-08-16
