技術 プログラムpython [python]pandaDataFrameをnumpy配列に変更する方法 PR 2023-10-23 2023-10-23 ## データ型の確認 print(type(data)) > <class 'pandas.core.frame.DataFrame'> ## numpy配列に変換する data = data.values ## データ型の確認 print(type(data)) > <class 'numpy.ndarray'>
技術 [python]LGBMでValueError: DataFrame.dtypes for data must be int, float or bool. Did not expect the data types in fields xxxx が出た時の対処方法メモ # 項目のタイプが処理できないというエラーのため、astypeで変換してあげればOK df = df.astype(float) # 対象項...
技術 [bigquery]特定項目のみをSELECT対象外にする方法 SELECT * EXCEPT(item_id) ## EXCEPTで指定した項目をSELECT対象外にする FROM dataset.ta...
技術 [python]xfeatを使ってカテゴリ変数のみを抽出する ## ライブラリのインストール pip install xfeat, sklearn >> /dev/null ## ライブラリのインポート...
技術 [bigquery]timestamp項目の年月日変換 -- 事前にDECLAREで変数定義 DECLARE timestamp_date TIMESTAMP; -- 変数に値を設定 SET ti...
技術 【トレジャーデータ】PRESTOにおけるパフォーマンスチューニングメモ 大量データの処理を行う場合などで処理効率を上げるのに使うコードを書いていきます。 SMART_DIGEST() : 文字列を短いハッシュ値に...
技術 [bigquery]修正前後のテーブル検証用クエリ テーブルの改修を行った時の検証用クエリメモです 旧テーブルと新テーブルについて月別で件数差分を出力する時のサンプルコード with oldB...